JDownloader Community - Appwork GmbH
 

Reply
 
Thread Tools Display Modes
  #1  
Old 23.04.2021, 19:40
nilor nilor is offline
Modem User
 
Join Date: Apr 2021
Posts: 4
Arrow Support für Blipfoto.com

Hi,

Support für blipfoto.com wäre super!

Auf der Seite gibt's nur Bilder, die immer von Cloudfront geliefert werden. Eigentlich eher trivial alles aufgebaut, aber trotzdem etwas nervig mit curl & Co. zu downloaden.

Beispiel Profil: **External links are only visible to Support Staff****External links are only visible to Support Staff**
Beispiel Eintrag: **External links are only visible to Support Staff****External links are only visible to Support Staff**
(Leerzeichen müssen entfernt werden)


MfG
nilor

Last edited by pspzockerscene; 26.04.2021 at 12:54. Reason: links verborgen
Reply With Quote
  #2  
Old 26.04.2021, 12:57
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 57,326
Default

Hi,
URLs dieser simpel aufgebauten Webseite könnte man einfach und ohne Plugin mit einer oder mehreren LinkCrawler Regeln crawlen:
https://support.jdownloader.org/Know...kcrawler-rules
Genauer mit einer solchen Regel:
https://support.jdownloader.org/Know...le-deepdecrypt

Gib bescheid falls du Hilfe brauchst.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist
Reply With Quote
  #3  
Old 27.04.2021, 11:07
nilor nilor is offline
Modem User
 
Join Date: Apr 2021
Posts: 4
Default

Hi,

danke für die Antwort.

Ich krieg das leider nicht hin nach 4 Stunden probieren. Ich verstehe nicht ganz wie ich mich durch die einzelnen Einträge "hangele", da diese nicht nach dem Schema **External links are only visible to Support Staff****External links are only visible to Support Staff**.[...].com/PROFIL_NICKNAME/BILD1 - BIS 99 aufgebaut sind sondern es immer solche random URLs sind wie z.B. **External links are only visible to Support Staff****External links are only visible to Support Staff**.[...].com/entry/283346335443307

Mache garantiert schwere Logikfehler.
Für Anregungen wäre ich daher dankbar.

LG
nilor
Reply With Quote
  #4  
Old 27.04.2021, 14:33
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 57,326
Default

Hi nochmal,
hier erstmal eine simple Regel, die die Bilder für einzelne "/entry/1234..." Links holt:
Code:
[ {
  "enabled" : true,
  "updateCookies" : true,
  "logging" : false,
  "maxDecryptDepth" : 1,
  "name" : "blipfoto.com Beispiel Regel fuer einzelne Bilder",
  "pattern" : "https?://(www\\.)?blipfoto\\.com/entry/[0-9]+",
  "rule" : "DEEPDECRYPT",
  "packageNamePattern" : null,
  "deepPattern" : "property=\"og:image\" content=\"(https?://[^\"]+)\""
} ]
Regel als Plaintext zum einfacheren Kopieren:
pastebin.com/vK6xd0BC

Gib bescheid, ob das bei dir klappt dann können wir gerne eine Regel für einzelne Bilder-Seiten von Profilen erstellen.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist
Reply With Quote
  #5  
Old 28.04.2021, 17:55
nilor nilor is offline
Modem User
 
Join Date: Apr 2021
Posts: 4
Thumbs up

Hi,

danke für die Regel; regular expressions sind echt nicht meine Stärke aber zum üben ist das hier super.

Ich kann jetzt einfach die URLs der Profilseiten manuell eingeben und dann den Download starten. Problem ist das die Auflösungen irgendwie nicht stimmen, bei meinen Tests wird irgendwie nur 300px x 300px Zeug geladen (sind die Thumbails / Vorschaubilder) obwohl die Bilder i.d.R. 720px × 960px sind.

Momentan guck ich wie sich das beheben lässt.

LG
nilor
Reply With Quote
  #6  
Old 28.04.2021, 19:12
Jiaz's Avatar
Jiaz Jiaz is offline
JD Manager
 
Join Date: Mar 2009
Location: Germany
Posts: 70,052
Default

Nein, die Regel gilt aktuell nur für einzelne entry Links,also die Bilder selbst.
Für Profilseiten benötigst du, siehe Anmerkung von pspzockerscene, noch eine weitere Regel, sonst findet JDownloader nur die Vorschaubilder
__________________
JD-Dev & Server-Admin
Reply With Quote
  #7  
Old 28.04.2021, 22:27
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 57,326
Default

@nilor
Wenn du ohne weitere Regeln einfach einen Profillink Tiefen-Analysieren lässt wird natürlich auch alles andere "neben" den "/entry/" Links zu den einzelnen Bildern aufgeschnappt.
Hier eine Regel, die auch Paketnamen setzt dann kannst du leichter unterscheiden, was nun von der Regel- und was einfach so gecrawlt wurde:

Code:
[ {
  "enabled" : true,
  "updateCookies" : true,
  "logging" : false,
  "maxDecryptDepth" : 1,
  "name" : "blipfoto.com Beispiel Regel fuer einzelne Bilder",
  "pattern" : "https?://(www\\.)?blipfoto\\.com/entry/[0-9]+",
  "rule" : "DEEPDECRYPT",
  "packageNamePattern" : "<title>(.*?) \\| Blipfoto</title>",
  "deepPattern" : "property=\"og:image\" content=\"(https?://[^\"]+)\""
} ]
Als Plaintext zum einfacheren Kopieren/Einfügen:
pastebin.com/243vfNdq

Mögliche Lösungen:
- Filter
und/oder:
- Zweite Regel, die die "profil" Link annimmt und dort jeweils nur die "/entry/" Links zu den einzelnen Bildern holt --> Werden dann von der Regel, die bereits hier im Thread steht verarbeitet

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist
Reply With Quote
  #8  
Old 06.05.2021, 15:18
nilor nilor is offline
Modem User
 
Join Date: Apr 2021
Posts: 4
Default

Danke, habe es nach etwas probieren wie gewünscht hinbekommen.
Reply With Quote
  #9  
Old 06.05.2021, 15:40
Jiaz's Avatar
Jiaz Jiaz is offline
JD Manager
 
Join Date: Mar 2009
Location: Germany
Posts: 70,052
Default

Perfekt Danke für die Rückmeldung
__________________
JD-Dev & Server-Admin
Reply With Quote
Reply

Thread Tools
Display Modes

Posting Rules
You may not post new threads
You may not post replies
You may not post attachments
You may not edit your posts

BB code is On
Smilies are On
[IMG] code is On
HTML code is Off

Forum Jump

All times are GMT +2. The time now is 02:01.
Provided By AppWork GmbH | Privacy | Imprint
Parts of the Design are used from Kirsch designed by Andrew & Austin
Powered by vBulletin® Version 3.8.10 Beta 1
Copyright ©2000 - 2021, Jelsoft Enterprises Ltd.