#1
|
|||
|
|||
[LinkCrawlerRule] [Wunsch] Plug-In für Model-Kartei.de
Ich würde mich über ein Plug-In für die Website **External links are only visible to Support Staff**www.model-kartei.de sehr freuen.
Mitglieder können dort Sedcards und Galerien anlegen. Beispiel: Sedcard: **External links are only visible to Support Staff****External links are only visible to Support Staff** Galerie: **External links are only visible to Support Staff****External links are only visible to Support Staff** Weiterhin gibt es eine Funktion, wo man Bilder ansehen kann, wo die Person markiert ist: **External links are only visible to Support Staff****External links are only visible to Support Staff** Es wäre super und sehr hilfreich wenn dieses Plug-In alle Bilder automatisch zusammengefasst in einen Ordner mit dem Namen der Person herunterladen würde. Es gibt sowohl einen freien Bereich den jeder Besucher sehen kann und dann gibt es noch einen Bereich der nur für Mitglieder zugänglich ist, genauer gesagt Fotos ab einem gewissen "Nacktheitsgrad" sind nur für Mitglieder zugänglich die nachgewiesen haben, dass sie volljährig sind. Daher wäre es sehr schön, wenn man bei dem Plug-In seine Mitgliedsdaten erfassen kann, so dass auch diese Bilder berücksichtigt werden. Wenn sich jemand erbarmt so ein Plug-In zu basteln, helfe ich gerne mit Testungen... Vielen Dank für eure Aufmerksamkeit Last edited by pspzockerscene; 11.05.2020 at 15:24. Reason: Ersten Link repariert |
#2
|
||||
|
||||
Hallo,
deine Webseite ist eine sehr simple Webseite. Ein Plugin ist dafür nicht notwendig. Die benötigte Funktionalität lässt sich einfach mithilfe unserer Link Crawler Regeln erreichen: pastebin.com/s9nB5KQR --> Regel einfügen unter Einstellungen --> Profieinstellungen --> link crawler rules -psp-
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download Last edited by pspzockerscene; 07.05.2020 at 10:24. |
#3
|
|||
|
|||
Vielen Dank für deine Hilfe...
Irgendwie bekomme ich das mit dem Code nicht hin. Ich habe die Profieinstellungen gefunden und auch "link crawler rules". Da gibt es bei mir zwei Einträge, einmal nur eine Checkbox und einmal einen Eintrag wo schon viel Code enthalten ist. Mein (vermutlich dummer) Versuch, den Code darunter einzufügen hatte leider keinen Erfolg. Ich sehe aber auch keine Stelle, wo man einen neuen Eintrag erstellen kann... Tante Google hat einige Ergebnisse ausgworfen, aber da ging es nur um den Inhalt nicht um die Basics... Magst Du oder jemand anders mir da auf die Sprünge helfen? Vielen lieben Dank! |
#4
|
|||
|
|||
@pspzockerscene
OK, ich habe es gerade selbst hinbekommen. Ich hatte versucht den Code am Ende einzufügen, das hatte nicht geklappt (wurde nicht übernommen), nun habe ich es am Anfang eingefügt und es läuft. Aber etwas ist noch merkwürdig: Es werden von den 38 Bildern auf der Beispielseite nur 8 Fotos als Downloadlink gefunden. Kannst Du mir da bei behilflich sein? Vielen Dank. |
#5
|
||||
|
||||
Hallo,
diese Webseite scheint gerade offline zu sein. Bitte melde dich sobald sie wieder online ist und poste die genauen Links zu den Inhalten, die du laden willst und beschreibe genau, wie viele Links JD findet, wie viele fehlen und wie viele du insgesamt erwartest. Grüße, psp EDIT Webseite ist wieder online ... EDIT2 Folgende Regel würde alle "Gallerie-Links" deines ersten Posts erfassen: Code der Regel für dich: pastebin.com/raw/WEuz3YBy Code der Regel für mich selbst im Forum:
Spoiler:
Code:
[ { "enabled" : true, "cookies" : null, "updateCookies" : true, "logging" : true, "maxDecryptDepth" : 0, "id" : 1589203343040, "name" : "model-kartei.de example rule single", "pattern" : "https?://(?:www\\.)?model-kartei\\.de/fotos/foto/\\d+/?", "rule" : "DEEPDECRYPT", "packageNamePattern" : null, "passwordPattern" : null, "formPattern" : null, "deepPattern" : "gofullscreen\" src=\"(**External links are only visible to Support Staff**]+)\"", "rewriteReplaceWith" : null }, { "enabled" : true, "cookies" : null, "updateCookies" : true, "logging" : true, "maxDecryptDepth" : 0, "id" : 1589203343041, "name" : "model-kartei.de example rule multiple", "pattern" : "https?://(?:www\\.)?model-kartei\\.de/(sedcards/model|sedcards/fotograf|fotos/galerie)/.+", "rule" : "DEEPDECRYPT", "packageNamePattern" : "<title>(.*?)</title>", "passwordPattern" : null, "formPattern" : null, "deepPattern" : "(https?://(?:www\\.)?model-kartei\\.de/fotos/foto/\\d+/?)", "rewriteReplaceWith" : null } ] Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download Last edited by pspzockerscene; 04.06.2024 at 13:15. Reason: Pastebin Link aktualisiert |
#6
|
|||
|
|||
@pspzockerscene
Vielen lieben Dank das Du dir das noch einmal angeschaut hast und das umgestellt hast. Es funktioniert jetzt schon sehr gut, es werden alle frei zugänglichen Bilder in den Links abgebildet, was fehlt sind die Bilder die man nur als Mitglied sehen kann. Alle Fotos die in Richtung "oben ohne" (und mehr) gehen, sind nur für Mitglieder anschaubar. Daher hatte ich die Idee das JDownloader meine Mitgliedsdaten berücksichtigt (Accountverwaltung), da dachte ich, das dafür ein Plug-In erstellt werden müsste. Geht das evtl. in deinem Script auch als Ergänzung? LG Jörg |
#7
|
||||
|
||||
Schick Pspzocker oder an support@jdownloader.org Logins und entsprechende BspLinks, dann kann man die Regeln erweitern, dass Cookies/Session genutzt werden. Das kann funktionieren, muss aber getestet werden
__________________
JD-Dev & Server-Admin |
#8
|
||||
|
||||
Richtig ohne Account kann ich dir da nicht helfen - und ja, unsere Crawler Regeln können auch mit Login-Cookies umgehen also ja das sollte möglich sein.
Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download |
#9
|
|||
|
|||
Vielen Dank Euch Beiden, ich habe psp gerade eine PM geschickt...
|
#10
|
||||
|
||||
Hallo,
Also mit einer neuen Version der beiden Regeln konnte ich statt 66 alle 100 Bilder bekommen. Die Webseite setzt zwei Cookies (bzw. zwei wichtige), wenn man eingeloggt ist. Die musst du dir holen - unter Chrome geht das z.B. indem du im Tab dieser mode Seite in der Adresszeile oben links auf das Schloss klickst --> Cookies --> Allex expandieren bis du die einzelnen Cookies siehst. Du solltest dich zuvor im Browser anmelden und das Häckchen bei "Eingeloggt bleiben" gesetzt haben! Hier öffentlich die zensierte Variante ohne die Cookie Werte: pastebin.com/raw/B01S8ZMe Privat habe ich dir noch eine mit meinen aktuellen Cookies geschickt, die du mit Glück direkt benutzen kann. Bitte bedenke, dass die Cookies ggf. ungültig werden, sobald du dein Passwort änderst --> Du musst sie erneuern. ... und ja, die Cookies müssen jeweils pro Regel angegeben werden! Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download Last edited by pspzockerscene; 11.04.2022 at 16:06. Reason: Pastebin Link verbessert |
#11
|
|||
|
|||
Ich habe es ausführlich getestet, es klappt wunderbar.
Sogar die Untergalerien und die Sammlungen mit Markierungen des Models funktionieren. Auch habe ich es mit einem neuem Passwort und dem neuen Cookie habe ich es ausprobiert. Es werden alle Bilderlinks gefunden und heruntergeladen. Ich danke Dir ganz herzlich. Du erleichterst mir damit mein Hobby sehr. Viele Grüße GeyerX |
#12
|
||||
|
||||
Danke fürs Feedback
Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download |
#13
|
||||
|
||||
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download |
#14
|
|||
|
|||
Sehr schön, vielen Dank
|
#15
|
|||
|
|||
Hey..
zuerst großen Dank an den Themen-Starter und psp.. Habe genau das gleiche bei MK versucht und mit eurer Hilfe sehr weit gekommen. Habe den CODE pastebin.com/B01S8ZMe eingetragen und seitdem kann ich auch Bilder die nur von Mitgliedern einsehbar sind, in voller Größe downloaden. CODE den ich eingefügt habe:
Spoiler:
[ {
"enabled" : true, "cookies" : [ [ "mk4_userpw", "zensiert" ], [ "mk4_userid", "zensiert" ] ], "updateCookies" : false, "logging" : true, "maxDecryptDepth" : 0, "name" : "model-kartei.de example rule single", "pattern" : "https?://(?:www\\.)?model-kartei\\.de/fotos/foto/\\d+/?", "rule" : "DEEPDECRYPT", "packageNamePattern" : null, "passwordPattern" : null, "formPattern" : null, "deepPattern" : "gofullscreen" src="(**External links are only visible to Support Staff**]+)"", "rewriteReplaceWith" : null }, { "enabled" : true, "cookies" : [ [ "mk4_userpw", "zensiert" ], [ "mk4_userid", "zensiert" ] ], "updateCookies" : false, "logging" : true, "maxDecryptDepth" : 0, "name" : "model-kartei.de example rule multiple", "pattern" : "https?://(?:www\\.)?model-kartei\\.de/(sedcards/model|sedcards/fotograf|fotos/galerie)/.+", "rule" : "DEEPDECRYPT", "packageNamePattern" : "<title>(.*?)</title>", "passwordPattern" : null, "formPattern" : null, "deepPattern" : "(https?://(?:www\\.)?model-kartei\\.de/fotos/foto/\\d+/?)", "rewriteReplaceWith" : null } ] Quote:
Beispiel-Link den ich einfüge: https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards/model/578519/maxmustermann/ Bedanke mich schoneinmal im Voraus für eure Hilfe |
#16
|
|||
|
|||
Habe jetzt bissle rumprobiert und folgendes herausgefunden:
Bilder aus der Sedcard, den Galerien und der Markierungen lassen sich jeweils herunterladen mit den einzelnen Links: Sedcard: https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards/model/552110/lucy-modle/ Galerie: https (Doppelpunkt) //www.model-kartei (Punkt) de/fotos/galerie/300845/ https (Doppelpunkt) //www.model-kartei (Punkt) de/fotos/galerie/294790/ ... https (Doppelpunkt) //www.model-kartei (Punkt) de/fotos/galerie/xxxxxx/ Markierungen: https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards.../tagged/#start https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards.../?page=1#start https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards.../?page=2#start https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards.../?page=3#start ... https (Doppelpunkt) //www.model-kartei (Punkt) de/sedcards.../?page=x#start Grundsätzlich funktioniert es. Jedoch sehr mühsam, da jeder Link (Sedcard-Link, Galerie-Link, Markierungen-Link) einzeln eingefügt werden muss und zudem die markierten Bilder in Seiten aufgeteilt werden (jeweils 40 Bilder pro Seite), diese also nochmal unterteilt werden. Gibt es eine Möglichkeit, dass mit einem Link die gesamten Bilder von einem Profil gedownloadet werden können ? Oder zumindestens die markierten Bilder in einem Wisch ? Die Links sind ja die gleichen, nur dass die die Pages fortlaufend sind. Last edited by JakeRyan; 09.04.2022 at 05:15. |
#17
|
|||
|
|||
Habe eine excel-Tabelle geschrieben mit der man sehr schnelle alle Links für die Markierten Bilder erzeugen kann.
Ins gelbe Feld wird der Link von bspw. der ersten Seite eingefügt und der letzte Part rausgelöscht. Dann einfach alle Links aus dem dem grünen Feld kopieren und fertig. Kann das jemand ins Script für JD schreiben, dann könnte man sich diesen kleinen manuellen Schritt/Umweg sparen. ? |
#18
|
|||
|
|||
https (Doppelpunkt) //i.ibb.co/QJSsVv3/Bildschirmfoto-2022-04-09-um-23-18-19 (Punkt) png
|
#19
|
||||
|
||||
Hi,
bitte umgehe unsere Linkzensur nicht das erschwert uns Mods die Arbeit. Wir können deine Links unzensiert sehen Aus Datenschutzgründen sind Links standardmäßig für andere User ausgeblendet. Links, die sichtbar sein sollen kann man dann entsprechend abändern. Quote:
Vorher ein Textdokument mit den Links anzulegen ist hier den Weg, den man gehen sollte. Mit entsprechenden Texteditoren wie z.B. Notepad++ (oder Excel wie du schon entdeckt hast) sollte das einfach möglich sein. Quote:
Welche Links gehen denn nun noch nicht per Regel, aber werden benötigt? Bitte konkrete Testlinks posten, ohne Umgehung unserer Linkzensur. Bitte Links posten, mit denen ich möglichst ohne einen model-kartei.de Account arbeiten kann! Grüße, psp EDIT Ich konnte auf die Schnelle keine funktionierenden "/tagged" Links finden, aber prinzipiell sollten die gehen wenn ich mir die Regel so anschaue...
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download Last edited by pspzockerscene; 11.04.2022 at 16:16. |
#20
|
||||
|
||||
Wir helfen gerne bei Regeln und/oder Skripten, aber brauchen schon konkrete Links welche denn nicht gehen bzw. welche unterstützt werden sollen
__________________
JD-Dev & Server-Admin |
#21
|
|||
|
|||
Moin,
Kann es sein, dass das ganze nicht mehr funktioniert?! Gibt es noch andere Wege an die zensierten Bilder zu kommen? Vielen Dank im Voraus! |
#22
|
|||
|
|||
Quote:
ich habe gerade einmal einen "Testlauf" gemacht, darunter sind auch eindeutig "zensierte" Bilder und ich konnte alles ohne Probleme herunterladen. Hat sich bei Dir evtl. etwas mit den Cookies geändert? Evtl. würde ich die Werte im Browser und bei deinen JDownloader-Daten abgleichen und ggf. noch einmal mit den aktuellen Werten eintragen. |
#23
|
|||
|
|||
Quote:
Kann ich dir ein paar screenshots per DM senden? Ich bin mit meinem Latein am Ende! |
#24
|
|||
|
|||
Quote:
Ich würde vielleicht das Protokoll von JDownloader aktivieren und hier den Code hinterlassen, dann kann einer der Programmierer vielleicht die Ursache bei Dir erkennen... Das wird zielführender sein... |
#25
|
|||
|
|||
Kann mir jemand von den Programmierern weiterhelfen?
|
#26
|
||||
|
||||
@GeyerX
Geht es nun noch bei dir oder nicht? Ohne Zugangsdaten kann ich hier nicht weiterhelfen. Wer Hilfe möchte, schickt mir bitte Zugangsdaten für Model-Kartei.de per PN.
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download Last edited by pspzockerscene; 04.06.2024 at 13:14. Reason: Tippfehler behoben |
#27
|
||||
|
||||
Danke fürs Schicken deiner Zugangsdaten Siggi2000.
Nun bräuchte ich noch ein paar Links, die bei dir auch mit der Regel nicht ladbar sind. Die Testlinks aus dem Eingangspost gehen bei mir einwandfrei.
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download |
#28
|
|||
|
|||
Quote:
Hier die links: **External links are only visible to Support Staff****External links are only visible to Support Staff** nur 24 sichtbar **External links are only visible to Support Staff****External links are only visible to Support Staff** nur 9 sichtbar **External links are only visible to Support Staff****External links are only visible to Support Staff** nur 29 sichtbar |
#29
|
||||
|
||||
Was bedeutet "nur"?
Ich sehe ebenfalls nur diese Anzahl von Links. Außerdem kann ich die Photos ohne Account anschauen/laden und die Regel greift bei mir. Bitte beschreibe das Problem genauer: - Was fehlt bzw. welche Links/Bilder werden nicht gefunden? - Was geht nicht so wie du es dir vorstellst? EDIT Und was ist damit gemeint? Welche zensierten Bilder?
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download Last edited by pspzockerscene; 06.10.2023 at 18:07. Reason: Wording verbessert |
#30
|
|||
|
|||
Ich habe das so verstanden, dass der Code alle Bilder anzeigen kann.
Auch die, die nur für Mitglieder mit FSK 18 Freischaltung zu sehen sind. Zb dieses Foto. **External links are only visible to Support Staff****External links are only visible to Support Staff** |
#31
|
||||
|
||||
Also dieses Photo kann ich nichtmal anschauen, wenn ich mit deinem Account eingeloggt bin.
Muss man auf der Seite noch was einstellen? Falls du das Bild in deinem Browser ebenfalls nicht sehen kannst: Verstehe mich nicht falsch, aber JD kann nicht zaubern: Wenn das Bild z.B. serverseitig nur für bestimmte / verifizierte Accounts anschaubar ist, kann JD dieses Limit nicht überwinden: Er "sieht" dasselbe wie du, wenn du es im Browser öffnest.
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download |
#32
|
|||
|
|||
Ich habe da wohl etwas zu viel erwartet.
Trotzdem vielen Dank für euren Support! |
#33
|
||||
|
||||
Alles klar.
Ich vermute mal, das ist das Feature "MK18" was man hier erwerben kann: model-kartei.de/vip/ Sofern gekauft, sollte man die 18+ Bilder dann auch mithilfe der LinkCrawler Regel und den Cookies mit JD laden können.
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download |
#34
|
||||
|
||||
Das nächste Update enthält ein Hosterplugin für model-kartei.de.
Das Plugin kümmert sich um den Download einzelner Photos - mit dem Crawlen von Gallerien hat es nichts zu tun. Folgendes ändert sich dadurch:
Wartest du auf einen angekündigten Bugfix oder ein neues Feature? Updates werden nicht immer sofort bereitgestellt! Bitte lies unser Update FAQ! | Please read our Update FAQ! --- Are you waiting for recently announced changes to get released? Updates to not necessarily get released immediately! Bitte lies unser Update FAQ! | Please read our Update FAQ! -psp- EDIT Weitere Änderungen: - Wird ein Datum gefunden, wird dieses vorangestellt im Dateinamen gesetzt - Unterstützung für Videos eingebaut
__________________
JD Supporter, Plugin Dev. & Community Manager
Erste Schritte & Tutorials || JDownloader 2 Setup Download Last edited by pspzockerscene; 05.06.2024 at 15:27. Reason: EDIT |
Thread Tools | |
Display Modes | |
|
|