@att2
So ist das bei Cloudflare - es kann jederzeit aktiv werden und dich nach Captchas/Challenges usw. fragen oder halt nicht.
Darauf haben wir keinen Einfluss.
Dein Log zeigt einen Fehler wegen Cloudflare ...
In deinem Fall könntest du ja relativ einfach ein Workaround bauen:
Eine Browser-Erweiterung oder ein "Greasemonkey" Script, das den Inhalt von der Seite abgreift und an JD schickt --> Also unseren Crawler vollständig umgehen.
Das würde mit Hostern- oder anderen Seiten, die Sessions brauchen, die ablaufen können nicht klappen.
Grüße, psp
|