JDownloader Community - Appwork GmbH
 

Reply
Page 1 of 2 1 2
 
Thread Tools Display Modes
  #1  
Old 07.05.2020, 00:32
GeyerX GeyerX is offline
JD Beta
  
Join Date: May 2016
Location: Norddeutsche Tiefebene
Posts: 52
Smile [LinkCrawlerRule] [Wunsch] Plug-In für Model-Kartei.de
Ich würde mich über ein Plug-In für die Website **External links are only visible to Support Staff**www.model-kartei.de sehr freuen.

Mitglieder können dort Sedcards und Galerien anlegen.
Beispiel:

Sedcard:

**External links are only visible to Support Staff****External links are only visible to Support Staff**

Galerie:

**External links are only visible to Support Staff****External links are only visible to Support Staff**


Weiterhin gibt es eine Funktion, wo man Bilder ansehen kann, wo die Person markiert ist:

**External links are only visible to Support Staff****External links are only visible to Support Staff**

Es wäre super und sehr hilfreich wenn dieses Plug-In alle Bilder automatisch zusammengefasst in einen Ordner mit dem Namen der Person herunterladen
würde.

Es gibt sowohl einen freien Bereich den jeder Besucher sehen kann und dann gibt es noch einen Bereich der nur für Mitglieder zugänglich ist, genauer gesagt Fotos ab einem gewissen "Nacktheitsgrad" sind nur für Mitglieder zugänglich die nachgewiesen haben, dass sie volljährig sind.

Daher wäre es sehr schön, wenn man bei dem Plug-In seine Mitgliedsdaten erfassen kann, so dass auch diese Bilder berücksichtigt werden.

Wenn sich jemand erbarmt so ein Plug-In zu basteln, helfe ich gerne mit Testungen...

Vielen Dank für eure Aufmerksamkeit ��
Last edited by pspzockerscene; 11.05.2020 at 16:24. Reason: Ersten Link repariert
Reply With Quote
  #2  
Old 07.05.2020, 10:52
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
  
Join Date: Mar 2009
Location: Deutschland
Posts: 69,629
Default
Hallo,

deine Webseite ist eine sehr simple Webseite.
Ein Plugin ist dafür nicht notwendig.
Die benötigte Funktionalität lässt sich einfach mithilfe unserer Link Crawler Regeln erreichen:

pastebin.com/s9nB5KQR

--> Regel einfügen unter Einstellungen --> Profieinstellungen --> link crawler rules

-psp-
__________________
JD Supporter, Plugin Dev. & Community Manager
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist

Last edited by pspzockerscene; 07.05.2020 at 11:24.
Reply With Quote
  #3  
Old 09.05.2020, 01:36
GeyerX GeyerX is offline
JD Beta
  
Join Date: May 2016
Location: Norddeutsche Tiefebene
Posts: 52
Default
Vielen Dank für deine Hilfe...

Irgendwie bekomme ich das mit dem Code nicht hin.

Ich habe die Profieinstellungen gefunden und auch "link crawler rules".
Da gibt es bei mir zwei Einträge, einmal nur eine Checkbox und einmal einen Eintrag wo schon viel Code enthalten ist.
Mein (vermutlich dummer) Versuch, den Code darunter einzufügen hatte leider keinen Erfolg.
Ich sehe aber auch keine Stelle, wo man einen neuen Eintrag erstellen kann...

Tante Google hat einige Ergebnisse ausgworfen, aber da ging es nur um den Inhalt nicht um die Basics...

Magst Du oder jemand anders mir da auf die Sprünge helfen?

Vielen lieben Dank!
Reply With Quote
  #4  
Old 11.05.2020, 01:07
GeyerX GeyerX is offline
JD Beta
  
Join Date: May 2016
Location: Norddeutsche Tiefebene
Posts: 52
Default
@pspzockerscene
OK, ich habe es gerade selbst hinbekommen.
Ich hatte versucht den Code am Ende einzufügen, das hatte nicht geklappt (wurde nicht übernommen), nun habe ich es am Anfang eingefügt und es läuft.

Aber etwas ist noch merkwürdig: Es werden von den 38 Bildern auf der Beispielseite nur 8 Fotos als Downloadlink gefunden.

Kannst Du mir da bei behilflich sein?

Vielen Dank.
Reply With Quote
  #5  
Old 11.05.2020, 16:23
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
  
Join Date: Mar 2009
Location: Deutschland
Posts: 69,629
Default
Hallo,
diese Webseite scheint gerade offline zu sein.

Bitte melde dich sobald sie wieder online ist und poste die genauen Links zu den Inhalten, die du laden willst und beschreibe genau, wie viele Links JD findet, wie viele fehlen und wie viele du insgesamt erwartest.

Grüße, psp
EDIT

Webseite ist wieder online ...
EDIT2

Folgende Regel würde alle "Gallerie-Links" deines ersten Posts erfassen:
Code der Regel für dich:
pastebin.com/WEuz3YBy

Code der Regel für mich selbst im Forum:
Spoiler:
Code:
[ {
  "enabled" : true,
  "cookies" : null,
  "updateCookies" : true,
  "logging" : true,
  "maxDecryptDepth" : 0,
  "id" : 1589203343040,
  "name" : "model-kartei.de example rule single",
  "pattern" : "https?://(?:www\\.)?model-kartei\\.de/fotos/foto/\\d+/?",
  "rule" : "DEEPDECRYPT",
  "packageNamePattern" : null,
  "passwordPattern" : null,
  "formPattern" : null,
  "deepPattern" : "gofullscreen\" src=\"(**External links are only visible to Support Staff**]+)\"",
  "rewriteReplaceWith" : null
}, {
  "enabled" : true,
  "cookies" : null,
  "updateCookies" : true,
  "logging" : true,
  "maxDecryptDepth" : 0,
  "id" : 1589203343041,
  "name" : "model-kartei.de example rule multiple",
  "pattern" : "https?://(?:www\\.)?model-kartei\\.de/(sedcards/model|sedcards/fotograf|fotos/galerie)/.+",
  "rule" : "DEEPDECRYPT",
  "packageNamePattern" : "<title>(.*?)</title>",
  "passwordPattern" : null,
  "formPattern" : null,
  "deepPattern" : "(https?://(?:www\\.)?model-kartei\\.de/fotos/foto/\\d+/?)",
  "rewriteReplaceWith" : null
} ]


Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist

Last edited by pspzockerscene; 11.05.2020 at 16:29.
Reply With Quote
  #6  
Old 12.05.2020, 02:01
GeyerX GeyerX is offline
JD Beta
  
Join Date: May 2016
Location: Norddeutsche Tiefebene
Posts: 52
Default
@pspzockerscene

Vielen lieben Dank das Du dir das noch einmal angeschaut hast und das umgestellt hast.
Es funktioniert jetzt schon sehr gut, es werden alle frei zugänglichen Bilder in den Links abgebildet, was fehlt sind die Bilder die man nur als Mitglied sehen kann.

Alle Fotos die in Richtung "oben ohne" (und mehr) gehen, sind nur für Mitglieder anschaubar.
Daher hatte ich die Idee das JDownloader meine Mitgliedsdaten berücksichtigt (Accountverwaltung), da dachte ich, das dafür ein Plug-In erstellt werden müsste.

Geht das evtl. in deinem Script auch als Ergänzung?

LG
Jörg
Reply With Quote
  #7  
Old 12.05.2020, 11:40
Jiaz's Avatar
Jiaz Jiaz is offline
JD Manager
  
Join Date: Mar 2009
Location: Germany
Posts: 79,084
Default
Schick Pspzocker oder an support@jdownloader.org Logins und entsprechende BspLinks, dann kann man die Regeln erweitern, dass Cookies/Session genutzt werden. Das kann funktionieren, muss aber getestet werden
__________________
JD-Dev & Server-Admin
Reply With Quote
  #8  
Old 12.05.2020, 13:13
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
  
Join Date: Mar 2009
Location: Deutschland
Posts: 69,629
Default
Richtig ohne Account kann ich dir da nicht helfen - und ja, unsere Crawler Regeln können auch mit Login-Cookies umgehen also ja das sollte möglich sein.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist

Reply With Quote
  #9  
Old 15.05.2020, 00:19
GeyerX GeyerX is offline
JD Beta
  
Join Date: May 2016
Location: Norddeutsche Tiefebene
Posts: 52
Default
Vielen Dank Euch Beiden, ich habe psp gerade eine PM geschickt...
Reply With Quote
  #10  
Old 15.05.2020, 14:32
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
  
Join Date: Mar 2009
Location: Deutschland
Posts: 69,629
Default
Hallo,

Also mit einer neuen Version der beiden Regeln konnte ich statt 66 alle 100 Bilder bekommen.
Die Webseite setzt zwei Cookies (bzw. zwei wichtige), wenn man eingeloggt ist.
Die musst du dir holen - unter Chrome geht das z.B. indem du im Tab dieser mode Seite in der Adresszeile oben links auf das Schloss klickst --> Cookies --> Allex expandieren bis du die einzelnen Cookies siehst.
Du solltest dich zuvor im Browser anmelden und das Häckchen bei "Eingeloggt bleiben" gesetzt haben!
Hier öffentlich die zensierte Variante ohne die Cookie Werte:
pastebin.com/raw/B01S8ZMe

Privat habe ich dir noch eine mit meinen aktuellen Cookies geschickt, die du mit Glück direkt benutzen kann.
Bitte bedenke, dass die Cookies ggf. ungültig werden, sobald du dein Passwort änderst --> Du musst sie erneuern.

... und ja, die Cookies müssen jeweils pro Regel angegeben werden!

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist

Last edited by pspzockerscene; 11.04.2022 at 17:06. Reason: Pastebin Link verbessert
Reply With Quote
  #11  
Old 16.05.2020, 18:09
GeyerX GeyerX is offline
JD Beta
  
Join Date: May 2016
Location: Norddeutsche Tiefebene
Posts: 52
Default
Ich habe es ausführlich getestet, es klappt wunderbar.
Sogar die Untergalerien und die Sammlungen mit Markierungen des Models funktionieren.
Auch habe ich es mit einem neuem Passwort und dem neuen Cookie habe ich es ausprobiert.
Es werden alle Bilderlinks gefunden und heruntergeladen.

Ich danke Dir ganz herzlich. Du erleichterst mir damit mein Hobby sehr.

Viele Grüße
GeyerX
Reply With Quote
  #12  
Old 18.05.2020, 15:39
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
  
Join Date: Mar 2009
Location: Deutschland
Posts: 69,629
Default
Danke fürs Feedback

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist

Reply With Quote
  #13  
Old 23.02.2021, 18:51
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
  
Join Date: Mar 2009
Location: Deutschland
Posts: 69,629
Default
Es gibt nun Hilfeartikel zum Thema LinkCrawler Regeln.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist

Reply With Quote
  #14  
Old 02.04.2021, 23:22
GeyerX GeyerX is offline
JD Beta
  
Join Date: May 2016
Location: Norddeutsche Tiefebene
Posts: 52
Default
Sehr schön, vielen Dank
Reply With Quote
  #15  
Old 09.04.2022, 05:35
JakeRyan JakeRyan is offline
Modem User
  
Join Date: Apr 2022
Posts: 4
Default
Hey..

zuerst großen Dank an den Themen-Starter und psp..
Habe genau das gleiche bei MK versucht und mit eurer Hilfe sehr weit gekommen.

Habe den CODE pastebin.com/B01S8ZMe eingetragen und seitdem kann ich auch Bilder die nur von Mitgliedern einsehbar sind, in voller Größe downloaden.

CODE den ich eingefügt habe:
Spoiler:
[ {
"enabled" : true,
"cookies" : [ [ "mk4_userpw", "zensiert" ], [ "mk4_userid", "zensiert" ] ],
"updateCookies" : false,
"logging" : true,
"maxDecryptDepth" : 0,
"name" : "model-kartei.de example rule single",
"pattern" : "https?://(?:www\\.)?model-kartei\\.de/fotos/foto/\\d+/?",
"rule" : "DEEPDECRYPT",
"packageNamePattern" : null,
"passwordPattern" : null,
"formPattern" : null,
"deepPattern" : "gofullscreen" src="(**External links are only visible to Support Staff**]+)"",
"rewriteReplaceWith" : null
}, {
"enabled" : true,
"cookies" : [ [ "mk4_userpw", "zensiert" ], [ "mk4_userid", "zensiert" ] ],
"updateCookies" : false,
"logging" : true,
"maxDecryptDepth" : 0,
"name" : "model-kartei.de example rule multiple",
"pattern" : "https?://(?:www\\.)?model-kartei\\.de/(sedcards/model|sedcards/fotograf|fotos/galerie)/.+",
"rule" : "DEEPDECRYPT",
"packageNamePattern" : "<title>(.*?)</title>",
"passwordPattern" : null,
"formPattern" : null,
"deepPattern" : "(https?://(?:www\\.)?model-kartei\\.de/fotos/foto/\\d+/?)",
"rewriteReplaceWith" : null
} ]


Quote:
Originally Posted by GeyerX View Post
Ich habe es ausführlich getestet, es klappt wunderbar.
Sogar die Untergalerien und die Sammlungen mit Markierungen des Models funktionieren.
Leider schaffe ich es grad nur die Bilder von der Sedcard downzuladen. Bilder aus den Gallerien werden nicht gedownloadet. Habt ihr den CODE noch erweitert oder hat sich die Webseite verändert, sodass es nicht mehr möglich ist auch Gallerien und Markierte Bilder direkt mit dem Link des Fotografen/Models zu downloaden.
Beispiel-Link den ich einfüge:

https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards/model/578519/maxmustermann/

Bedanke mich schoneinmal im Voraus für eure Hilfe
Reply With Quote
  #16  
Old 09.04.2022, 06:13
JakeRyan JakeRyan is offline
Modem User
  
Join Date: Apr 2022
Posts: 4
Default
Habe jetzt bissle rumprobiert und folgendes herausgefunden:

Bilder aus der Sedcard, den Galerien und der Markierungen lassen sich jeweils herunterladen mit den einzelnen Links:

Sedcard:
https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards/model/552110/lucy-modle/

Galerie:
https (Doppelpunkt) //www.model-kartei (Punkt) de/fotos/galerie/300845/
https (Doppelpunkt) //www.model-kartei (Punkt) de/fotos/galerie/294790/
...
https (Doppelpunkt) //www.model-kartei (Punkt) de/fotos/galerie/xxxxxx/

Markierungen:
https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards.../tagged/#start
https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards.../?page=1#start
https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards.../?page=2#start
https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards.../?page=3#start
...
https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards.../?page=x#start

Grundsätzlich funktioniert es. Jedoch sehr mühsam, da jeder Link (Sedcard-Link, Galerie-Link, Markierungen-Link) einzeln eingefügt werden muss und zudem die markierten Bilder in Seiten aufgeteilt werden (jeweils 40 Bilder pro Seite), diese also nochmal unterteilt werden.

Gibt es eine Möglichkeit, dass mit einem Link die gesamten Bilder von einem Profil gedownloadet werden können ?

Oder zumindestens die markierten Bilder in einem Wisch ?
Die Links sind ja die gleichen, nur dass die die Pages fortlaufend sind.
Last edited by JakeRyan; 09.04.2022 at 06:15.
Reply With Quote
  #17  
Old 10.04.2022, 00:23
JakeRyan JakeRyan is offline
Modem User
  
Join Date: Apr 2022
Posts: 4
Default
Habe eine excel-Tabelle geschrieben mit der man sehr schnelle alle Links für die Markierten Bilder erzeugen kann.



Ins gelbe Feld wird der Link von bspw. der ersten Seite eingefügt und der letzte Part rausgelöscht. Dann einfach alle Links aus dem dem grünen Feld kopieren und fertig.

Kann das jemand ins Script für JD schreiben, dann könnte man sich diesen kleinen manuellen Schritt/Umweg sparen. ?
Reply With Quote
  #18  
Old 10.04.2022, 00:25
JakeRyan JakeRyan is offline
Modem User
  
Join Date: Apr 2022
Posts: 4
Default
https (Doppelpunkt) //i.ibb.co/QJSsVv3/Bildschirmfoto-2022-04-09-um-23-18-19 (Punkt) png
Reply With Quote
  #19  
Old 11.04.2022, 17:13
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
  
Join Date: Mar 2009
Location: Deutschland
Posts: 69,629
Default
Hi,
bitte umgehe unsere Linkzensur nicht das erschwert uns Mods die Arbeit.
Wir können deine Links unzensiert sehen
Aus Datenschutzgründen sind Links standardmäßig für andere User ausgeblendet.
Links, die sichtbar sein sollen kann man dann entsprechend abändern.
Quote:
Originally Posted by JakeRyan View Post
Gibt es eine Möglichkeit, dass mit einem Link die gesamten Bilder von einem Profil gedownloadet werden können ?
Außer mit einem "richtigen" JD Plugin sehe ich da keine Möglichkeit.
Vorher ein Textdokument mit den Links anzulegen ist hier den Weg, den man gehen sollte.
Mit entsprechenden Texteditoren wie z.B. Notepad++ (oder Excel wie du schon entdeckt hast) sollte das einfach möglich sein.

Quote:
Originally Posted by JakeRyan View Post
Kann das jemand ins Script für JD schreiben, dann könnte man sich diesen kleinen manuellen Schritt/Umweg sparen. ?
Ein Plugin ist derzeit nicht geplant.
Welche Links gehen denn nun noch nicht per Regel, aber werden benötigt?
Bitte konkrete Testlinks posten, ohne Umgehung unserer Linkzensur.
Bitte Links posten, mit denen ich möglichst ohne einen model-kartei.de Account arbeiten kann!

Grüße, psp
EDIT

Ich konnte auf die Schnelle keine funktionierenden "/tagged" Links finden, aber prinzipiell sollten die gehen wenn ich mir die Regel so anschaue...
__________________
JD Supporter, Plugin Dev. & Community Manager
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist

Last edited by pspzockerscene; 11.04.2022 at 17:16.
Reply With Quote
  #20  
Old 11.04.2022, 19:46
Jiaz's Avatar
Jiaz Jiaz is offline
JD Manager
  
Join Date: Mar 2009
Location: Germany
Posts: 79,084
Default
Wir helfen gerne bei Regeln und/oder Skripten, aber brauchen schon konkrete Links welche denn nicht gehen bzw. welche unterstützt werden sollen
__________________
JD-Dev & Server-Admin
Reply With Quote
Reply
Page 1 of 2 1 2

« Previous Thread | Next Thread »
Thread Tools
Display Modes
Linear Mode Linear Mode

Posting Rules
You may not post new threads
You may not post replies
You may not post attachments
You may not edit your posts
BB code is On
Smilies are On
[IMG] code is On
HTML code is Off
Forum Jump

All times are GMT +2. The time now is 10:31.
JDownloader Community Board - Archive - Top
Provided By AppWork GmbH | Privacy | Imprint
Parts of the Design are used from Kirsch designed by Andrew & Austin
Powered by vBulletin® Version 3.8.10 Beta 1
Copyright ©2000 - 2023, Jelsoft Enterprises Ltd.