View Single Post
  #53  
Old 25.06.2020, 15:52
Amiganer Amiganer is offline
DSL User
 
Join Date: Mar 2019
Posts: 38
Default Anderer Ansatz

Hallo.

Das mit dem Cloudflare ist mist zum downloaden, das stimmt, darum möchte ich hier einen anderen Ansatz schildern, wie ich ihn verwende.

Die Links zum Downloaden haben bestimmt ein Muster, dieses zu einem Regex Ausdruck machen.

Ich mache das so: Die Seite als HTML abspeichern, dann ein kleines Python-Script das mit genau das Muster raussucht udn dann auch schon in eine crawljob-Datei reinschreibt und fertig.
Dann ist es auch möglich, eine "Suchseite" die die ganzen Doenload-Links enthält zu durchsuchen.

Achtung: Die crawjob-Datei lieben nicht im "Folderwatch" erzeugen! Wenn sie nämlich länger ist und JD sich die Datei holt, während sie noch geschrieben wird, gehen Links verloren. Lieber nachträgliche in den folderwatch kopieren.

Hoffe, das hilft ein wenig....

Bye, Christian
Reply With Quote