[netdudunet]

hallo zusammen,

ich möchte gerne meinen linkcrawler aktualisieren, aber bei data-load.in bekomme ich einfach keine links in den JD gecrawlt. kann mir bitte jemand helfen?
mein pattern sieht aktuell so aus:

beispiellink: **External links are only visible to Support Staff****External links are only visible to Support Staff**

{
"cookies" : [["xf_session","SESSION_wert"],
["xf_user","USER_wert"],
["xf_csrf","CSRF_wert"]
],
"enabled" : true,
"name" : "dataloadin",
"pattern" : "http?s://www\\.data-load\\.in/threads/[a-zA-Z0-9\\-.]+/",
"rule" : "DEEPDECRYPT"
}

habs auch mit "http?s://www\\.data-load\\.in/threads/[a-zA-Z0-9\\-]+/\\.\\d+/" versucht, ohne erfolg.

aber scheinbar genügt das nicht, um JD den benötigten zugang zur seite zu verschaffen. habt ihr eine idee dazu?

vielen dank und viele grüße
steven

[pspzockerscene]

Hi,
ohne Zugang zur Seite kann ich das nicht vernünftig testen.
Bitte schicke mir deine data-load Zugangsdaten per PN oder an: psp@jdownloader.org.

Grüße, psp

[Jiaz]

@netdudunet: Du kannst mittels einfügen von

"logging": true

das Logging für diese Regel aktivieren. Sicher das die Links normal im HTML enthalten sind ohne Kürzer/Versteck-Domain/Javascript?
Schick die Zugangsdaten an pspzockerscene und er wird das prüfen können

[netdudunet]

Originally Posted by Jiaz

@netdudunet: Du kannst mittels einfügen von

das Logging für diese Regel aktivieren. Sicher das die Links normal im HTML enthalten sind ohne Kürzer/Versteck-Domain/Javascript?
Schick die Zugangsdaten an pspzockerscene und er wird das prüfen können

danke, ich probier´s nachher mal aus.
die links liegen meist direkt als text/html vor, manchmal hinter einem linkcrypter. beides funktioniert auf anderen seiten wunderbar. selbst auf byte.to oder
gar **External links are only visible to Support Staff****External links are only visible to Support Staff** lassen sich die links direkt rausziehen (hier sogar ohne die links vorher aktivieren zu müssen). allerdings funktionieren die auch ohne login

viele grüße
steven

[pspzockerscene]

Deine beiden im letzten Post erwähnten Beispiele/Seiten funktionieren automatisch, da es Plugins dafür gibt.
Es gibt kein Plugin für data-load.in daher musst du über LinkCrawler Regeln oder entsprechende Browser-Addons gehen.

Evtl. ist folgendes für dich auch hilfreich:
Chrome Addon "Link Gopher" - listet mit zwei Klicks alle Links einer Webseite auf und man kann auch Filter einstellen.

*komfortabler ist jedoch eine funktionierende LinkCrawler Regel wenn du mich fragst.

Grüße, psp

[netdudunet]

ich habe dir die zugangsdaten vorhin per mail geschickt, vielleicht findest du ja zeit dir das anzuschauen, ich möchte gerne eine regel im linkcrawler erstellen.

danke

[netdudunet]

hmm, für **External links are only visible to Support Staff****External links are only visible to Support Staff** konnte ich kein plugin finden. die seite hat auch erst funktioniert, nachdem ich eine linkcrawler-regel erstellt habe.

[pspzockerscene]

Doch dafür gibt es ein Plugin und dein Link wird hier ohne Regel gehandelt.
Siehe auch:
https://board.jdownloader.org/showthread.php?t=90551

Du hast vermutlich z.B. in den Plugineinstellungen geschaut und die Liste dort für eine vollständige Liste gehalten -> Ist nicht der Fall und ist hier erklärt:
https://support.jdownloader.org/Know...bsites-plugins

[pspzockerscene]

Hier ist eine Regel, die funktioniert:

[
  {
    "enabled": true,
    "cookies": [
      [
        "xf_session",
        "ZENSIERT"
      ]
    ],
    "updateCookies": true,
    "logging": false,
    "maxDecryptDepth": 1,
    "name": "example rule for data-load.in",
    "pattern": "https?://www\\.data-load\\.in/threads/[a-z0-9\\-]+\\.[0-9]+/",
    "rule": "DEEPDECRYPT",
    "packageNamePattern": "<title>(.*?)</title>",
    "deepPattern": "<a href=\"(https?://[^\"]+)\" target=\"_blank\" class=\"link link--external\""
  }
]

Zum einfacheren Kopieren als plaintext:
pastebin.com/raw/pDsKMdJv

data-load benutzt dieselbe Forensoftware wie "khinsider" daher ist die Regel was den Cookie Teil betrifft ähnlich dieser.
(Bei khinsider wurden aus verschiedenen Gründen mehrere Regeln benötigt.)

Sobald die Regel bei dir funktioniert, kannst du dein Passwort ändern - ich brauche deinen Account nicht mehr.

Grüße, psp