JDownloader Community - Appwork GmbH
 

Reply
 
Thread Tools Display Modes
  #1  
Old 06.05.2020, 23:32
GeyerX GeyerX is offline
JD Alpha
 
Join Date: May 2016
Posts: 20
Smile [LinkCrawlerRule] [Wunsch] Plug-In für Model-Kartei.de

Ich würde mich über ein Plug-In für die Website **External links are only visible to Support Staff**www.model-kartei.de sehr freuen.

Mitglieder können dort Sedcards und Galerien anlegen.
Beispiel:

Sedcard:

**External links are only visible to Support Staff****External links are only visible to Support Staff**

Galerie:

**External links are only visible to Support Staff****External links are only visible to Support Staff**


Weiterhin gibt es eine Funktion, wo man Bilder ansehen kann, wo die Person markiert ist:

**External links are only visible to Support Staff****External links are only visible to Support Staff**

Es wäre super und sehr hilfreich wenn dieses Plug-In alle Bilder automatisch zusammengefasst in einen Ordner mit dem Namen der Person herunterladen
würde.

Es gibt sowohl einen freien Bereich den jeder Besucher sehen kann und dann gibt es noch einen Bereich der nur für Mitglieder zugänglich ist, genauer gesagt Fotos ab einem gewissen "Nacktheitsgrad" sind nur für Mitglieder zugänglich die nachgewiesen haben, dass sie volljährig sind.

Daher wäre es sehr schön, wenn man bei dem Plug-In seine Mitgliedsdaten erfassen kann, so dass auch diese Bilder berücksichtigt werden.

Wenn sich jemand erbarmt so ein Plug-In zu basteln, helfe ich gerne mit Testungen...

Vielen Dank für eure Aufmerksamkeit ��

Last edited by pspzockerscene; 11.05.2020 at 15:24. Reason: Ersten Link repariert
Reply With Quote
  #2  
Old 07.05.2020, 09:52
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 54,359
Default

Hallo,

deine Webseite ist eine sehr simple Webseite.
Ein Plugin ist dafür nicht notwendig.
Die benötigte Funktionalität lässt sich einfach mithilfe unserer Link Crawler Regeln erreichen:

pastebin.com/s9nB5KQR

--> Regel einfügen unter Einstellungen --> Profieinstellungen --> link crawler rules

-psp-
__________________
JD Supporter, Plugin Dev. & Community Manager
How to create a log || Wie man einen Log erstellt
Captcha FAQ EN || Captcha FAQ DE || Erste Schritte & Tutorials
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist

Last edited by pspzockerscene; 07.05.2020 at 10:24.
Reply With Quote
  #3  
Old 09.05.2020, 00:36
GeyerX GeyerX is offline
JD Alpha
 
Join Date: May 2016
Posts: 20
Default

Vielen Dank für deine Hilfe...

Irgendwie bekomme ich das mit dem Code nicht hin.

Ich habe die Profieinstellungen gefunden und auch "link crawler rules".
Da gibt es bei mir zwei Einträge, einmal nur eine Checkbox und einmal einen Eintrag wo schon viel Code enthalten ist.
Mein (vermutlich dummer) Versuch, den Code darunter einzufügen hatte leider keinen Erfolg.
Ich sehe aber auch keine Stelle, wo man einen neuen Eintrag erstellen kann...

Tante Google hat einige Ergebnisse ausgworfen, aber da ging es nur um den Inhalt nicht um die Basics...

Magst Du oder jemand anders mir da auf die Sprünge helfen?

Vielen lieben Dank!
Reply With Quote
  #4  
Old 11.05.2020, 00:07
GeyerX GeyerX is offline
JD Alpha
 
Join Date: May 2016
Posts: 20
Default

@pspzockerscene
OK, ich habe es gerade selbst hinbekommen.
Ich hatte versucht den Code am Ende einzufügen, das hatte nicht geklappt (wurde nicht übernommen), nun habe ich es am Anfang eingefügt und es läuft.

Aber etwas ist noch merkwürdig: Es werden von den 38 Bildern auf der Beispielseite nur 8 Fotos als Downloadlink gefunden.

Kannst Du mir da bei behilflich sein?

Vielen Dank.
Reply With Quote
  #5  
Old 11.05.2020, 15:23
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 54,359
Default

Hallo,
diese Webseite scheint gerade offline zu sein.

Bitte melde dich sobald sie wieder online ist und poste die genauen Links zu den Inhalten, die du laden willst und beschreibe genau, wie viele Links JD findet, wie viele fehlen und wie viele du insgesamt erwartest.

Grüße, psp
EDIT

Webseite ist wieder online ...

EDIT2

Folgende Regel würde alle "Gallerie-Links" deines ersten Posts erfassen:
Code der Regel für dich:
pastebin.com/WEuz3YBy

Code der Regel für mich selbst im Forum:
Spoiler:
Code:
[ {
  "enabled" : true,
  "cookies" : null,
  "updateCookies" : true,
  "logging" : true,
  "maxDecryptDepth" : 0,
  "id" : 1589203343040,
  "name" : "model-kartei.de example rule single",
  "pattern" : "https?://(?:www\\.)?model-kartei\\.de/fotos/foto/\\d+/?",
  "rule" : "DEEPDECRYPT",
  "packageNamePattern" : null,
  "passwordPattern" : null,
  "formPattern" : null,
  "deepPattern" : "gofullscreen\" src=\"(**External links are only visible to Support Staff**]+)\"",
  "rewriteReplaceWith" : null
}, {
  "enabled" : true,
  "cookies" : null,
  "updateCookies" : true,
  "logging" : true,
  "maxDecryptDepth" : 0,
  "id" : 1589203343041,
  "name" : "model-kartei.de example rule multiple",
  "pattern" : "https?://(?:www\\.)?model-kartei\\.de/(sedcards/model|sedcards/fotograf|fotos/galerie)/.+",
  "rule" : "DEEPDECRYPT",
  "packageNamePattern" : "<title>(.*?)</title>",
  "passwordPattern" : null,
  "formPattern" : null,
  "deepPattern" : "(https?://(?:www\\.)?model-kartei\\.de/fotos/foto/\\d+/?)",
  "rewriteReplaceWith" : null
} ]


Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
How to create a log || Wie man einen Log erstellt
Captcha FAQ EN || Captcha FAQ DE || Erste Schritte & Tutorials
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist

Last edited by pspzockerscene; 11.05.2020 at 15:29.
Reply With Quote
  #6  
Old 12.05.2020, 01:01
GeyerX GeyerX is offline
JD Alpha
 
Join Date: May 2016
Posts: 20
Default

@pspzockerscene

Vielen lieben Dank das Du dir das noch einmal angeschaut hast und das umgestellt hast.
Es funktioniert jetzt schon sehr gut, es werden alle frei zugänglichen Bilder in den Links abgebildet, was fehlt sind die Bilder die man nur als Mitglied sehen kann.

Alle Fotos die in Richtung "oben ohne" (und mehr) gehen, sind nur für Mitglieder anschaubar.
Daher hatte ich die Idee das JDownloader meine Mitgliedsdaten berücksichtigt (Accountverwaltung), da dachte ich, das dafür ein Plug-In erstellt werden müsste.

Geht das evtl. in deinem Script auch als Ergänzung?

LG
Jörg
Reply With Quote
  #7  
Old 12.05.2020, 10:40
Jiaz's Avatar
Jiaz Jiaz is offline
JD Manager
 
Join Date: Mar 2009
Location: Germany
Posts: 67,320
Default

Schick Pspzocker oder an support@jdownloader.org Logins und entsprechende BspLinks, dann kann man die Regeln erweitern, dass Cookies/Session genutzt werden. Das kann funktionieren, muss aber getestet werden
__________________
JD-Dev & Server-Admin
Reply With Quote
  #8  
Old 12.05.2020, 12:13
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 54,359
Default

Richtig ohne Account kann ich dir da nicht helfen - und ja, unsere Crawler Regeln können auch mit Login-Cookies umgehen also ja das sollte möglich sein.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
How to create a log || Wie man einen Log erstellt
Captcha FAQ EN || Captcha FAQ DE || Erste Schritte & Tutorials
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist
Reply With Quote
  #9  
Old 14.05.2020, 23:19
GeyerX GeyerX is offline
JD Alpha
 
Join Date: May 2016
Posts: 20
Default

Vielen Dank Euch Beiden, ich habe psp gerade eine PM geschickt...
Reply With Quote
  #10  
Old 15.05.2020, 13:32
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 54,359
Default

Hallo,

Also mit einer neuen Version der beiden Regeln konnte ich statt 66 alle 100 Bilder bekommen.
Die Webseite setzt zwei Cookies (bzw. zwei wichtige), wenn man eingeloggt ist.
Die musst du dir holen - unter Chrome geht das z.B. indem du im Tab dieser mode Seite in der Adresszeile oben links auf das Schloss klickst --> Cookies --> Allex expandieren bis du die einzelnen Cookies siehst.
Du solltest dich zuvor im Browser anmelden und das Häckchen bei "Eingeloggt bleiben" gesetzt haben!
Hier öffentlich die zensierte Variante ohne die Cookie Werte:
pastebin.com/B01S8ZMe

Privat habe ich dir noch eine mit meinen aktuellen Cookies geschickt, die du mit Glück direkt benutzen kann.
Bitte bedenke, dass die Cookies ggf. ungültig werden, sobald du dein Passwort änderst --> Du musst sie erneuern.

... und ja, die Cookies müssen jeweils pro Regel angegeben werden!

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
How to create a log || Wie man einen Log erstellt
Captcha FAQ EN || Captcha FAQ DE || Erste Schritte & Tutorials
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist
Reply With Quote
  #11  
Old 16.05.2020, 17:09
GeyerX GeyerX is offline
JD Alpha
 
Join Date: May 2016
Posts: 20
Default

Ich habe es ausführlich getestet, es klappt wunderbar.
Sogar die Untergalerien und die Sammlungen mit Markierungen des Models funktionieren.
Auch habe ich es mit einem neuem Passwort und dem neuen Cookie habe ich es ausprobiert.
Es werden alle Bilderlinks gefunden und heruntergeladen.

Ich danke Dir ganz herzlich. Du erleichterst mir damit mein Hobby sehr.

Viele Grüße
GeyerX
Reply With Quote
  #12  
Old 18.05.2020, 14:39
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 54,359
Default

Danke fürs Feedback

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager
How to create a log || Wie man einen Log erstellt
Captcha FAQ EN || Captcha FAQ DE || Erste Schritte & Tutorials
JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
That's true James
Quote:
Originally Posted by James
Die Leute verstehen einfach nicht dass nur weil man mit einer Waffe auch auf Menschen schießen kann dass ein Schützenver​ein kein Ort für Amoklaufide​en ist
Reply With Quote
Reply

Thread Tools
Display Modes

Posting Rules
You may not post new threads
You may not post replies
You may not post attachments
You may not edit your posts

BB code is On
Smilies are On
[IMG] code is On
HTML code is Off

Forum Jump

All times are GMT +2. The time now is 20:47.
Provided By AppWork GmbH | Privacy | Imprint
Parts of the Design are used from Kirsch designed by Andrew & Austin
Powered by vBulletin® Version 3.8.10 Beta 1
Copyright ©2000 - 2020, Jelsoft Enterprises Ltd.