JDownloader Community - Appwork GmbH
 

Notices

Reply
 
Thread Tools Display Modes
  #1  
Old 02.02.2022, 15:05
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default [LinkCrawler Regeln] 3D Models & Texturen in JD kopieren models-resource.com

Hey,

Ich bräuchte z.B. bei dieser Seite:
**External links are only visible to Support Staff****External links are only visible to Support Staff**
alle Texturen

Hier: **External links are only visible to Support Staff****External links are only visible to Support Staff**

unter
Download this Texture
bekommt man diese


Das gleiche hier:
**External links are only visible to Support Staff****External links are only visible to Support Staff**
und hier wieder der Beispiel DL:
**External links are only visible to Support Staff****External links are only visible to Support Staff**

Download this Model

Kann man dieses irgendwie in JD einfügen?

Wenn möglich mit den Bildern, die unter
Download this Model stehen

Es ist alles Nummerriert und benannt, von daher müsste alles nur reinkopiert werden.

Wäre toll, aber kein muss wenn die Dateien irgendwie in die entsprechenden Ordner kopiert werden, z.B.

Characters
Enemies

wie hier zu finden:
**External links are only visible to Support Staff****External links are only visible to Support Staff**
thx
Reply With Quote
  #2  
Old 02.02.2022, 18:05
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Sers zToRm777,
ja ein automatisches Erkennen dieser Links ist möglich mit zwei LinkCrawler Regeln.
Man könnte auch noch eine dritte Regel machen, die alle URLs innerhalb dieser "Übersichtsseiten" (dein erster Link) holt, aber das klappt auch mit unserem generischen deep-Crawler bereits.

Hier mal zwei Regeln für "textures-resources.com":
Code:
[
  {
    "enabled": true,
    "updateCookies": true,
    "logging": false,
    "maxDecryptDepth": 1,
    "name": "example textures-resource.com create direct URLs out of single texture URLs",
    "pattern": "**External links are only visible to Support Staff**,
    "rule": "REWRITE",
    "rewriteReplaceWith": "**External links are only visible to Support Staff**
  },
  {
    "enabled": true,
    "logging": false,
    "maxDecryptDepth": 1,
    "name": "example textures-resource accept direct URLs",
    "pattern": "**External links are only visible to Support Staff**,
    "rule": "DIRECTHTTP"
  }
]
Regeln als Plaintext zum einfacheren Kopieren & Einfügen:
pastebin.com/raw/yVNcvfm0

Die andere Webseite funktioniert sehr ähnlich.
Evtl. schaffst du es anhand meines Beispiels bzw. unserer Wissensdatenbank, für models-resource.com deine eigenen Regeln zu basteln.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #3  
Old 02.02.2022, 19:23
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

vielen dank, funktioniert, die 2. Seite werde ich bei Gelegenheit selber machen (probieren xD)

edit: er lädt jetzt alles so wie es sein soll, nur das größe Bild noch nicht

Last edited by zToRm777; 02.02.2022 at 21:52.
Reply With Quote
  #4  
Old 03.02.2022, 13:52
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Quote:
Originally Posted by zToRm777 View Post
vielen dank, funktioniert, die 2. Seite werde ich bei Gelegenheit selber machen (probieren xD)
Danke für dein Feedback.

Quote:
Originally Posted by zToRm777 View Post
edit: er lädt jetzt alles so wie es sein soll, nur das größe Bild noch nicht
Wie genau meinst du das?
Bitte poste einen Testlink, dann den Direkten Link zu dem Bild/Qualitätsstufe, die JD lädt und einen Link zum Bild/Qualitätsstufe, die du eigentlich möchtest.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #5  
Old 03.02.2022, 14:51
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

**External links are only visible to Support Staff****External links are only visible to Support Staff**
Der Link in dem das Bild ist
Da gibt es nur eine Größe und sollte so reinkopiert werden
**External links are only visible to Support Staff****External links are only visible to Support Staff**

Wenn man auf das Bild klickt, wird das Archiv geladen
Reply With Quote
  #6  
Old 03.02.2022, 15:19
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Funktioniert hier einwandfrei --> Deine Regel ist korrekt.
JD lädt ebenfalls das identische Archiv mit einer Dateigröße von ca 20KB.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #7  
Old 03.02.2022, 17:58
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Hab jetzt hier: **External links are only visible to Support Staff****External links are only visible to Support Staff**
als Test alles reinkopiert.
Bild 9386 hat im JD 20,88 kb https://abload.de/image.php?img=9386t0j8l.png

Original 107 kb https://abload.de/image.php?img=9386k3kk7.png

also lädt er nur die kleinen Bilder
Reply With Quote
  #8  
Old 03.02.2022, 18:09
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Ich glaube wir reden irgendwie aneinander vorbei also nochmal von vorne:
Mit den von mir erstellten Regeln passiert hier folgendes:
Dieser Link:
models-resource.com/3ds/pokemonxy/model/9386/
...wird geändert zu:
models-resource.com/download/9386/
...und dann wird eine .zip Datei mit der Größe von ~600KiB heruntergeladen.
In dieser .zip Datei befinden sich verschiedene Dateien.

Falls du die .zip Datei nicht möchtest sondern nur das Bild müssen die Regeln ganz anders aussehen.
Der Direktlink zu dem Bild der Größe von ~107KB wäre dieser:
models-resource.com/resources/big_icons/10/9386.png

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #9  
Old 03.02.2022, 18:52
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Ich bräuchte das Bild und die Zip Datei
Reply With Quote
  #10  
Old 03.02.2022, 19:26
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Schwierig!
Angenommen die Fullsize-Bilder liegen immer unter:
models-resource.com/resources/big_icons/10/<BilderID>.png
...kannst du die Regel einfach so abändern, dass aus den Übersichts-Links eben diese erstellt werden.
Das einfachste wäre wohl ein Script, das dir alle erstellt der du machst einmal nen Durchlauf mit der Regel, die dir die .zip Dateien holt und einmal einen mit der, die die Bilder holt.

Hier mal beispielhaft eine Regel, die die Links zu den Bildern aus den Übersichts-Links erstellt:
Code:
[
  {
    "enabled": true,
    "updateCookies": true,
    "logging": false,
    "maxDecryptDepth": 1,
    "name": "example models-resource.com create direct URLs out of single texture URLs",
    "pattern": "**External links are only visible to Support Staff**,
    "rule": "REWRITE",
    "rewriteReplaceWith": "**External links are only visible to Support Staff**
  },
  {
    "enabled": true,
    "logging": false,
    "maxDecryptDepth": 1,
    "name": "example models-resource.com accept direct URLs",
    "pattern": "**External links are only visible to Support Staff**,
    "rule": "DIRECTHTTP"
  }
]
Wenn die "original" Bilder doch nicht alle über diese eine URL Struktur erreichbar sind, wird es komplizierter/langsamer.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #11  
Old 03.02.2022, 19:40
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Also der Link hier ist immer gleich:
**External links are only visible to Support Staff****External links are only visible to Support Staff**
nur die Zahl "/10/<BilderID>.png" verändert sich immer
Reply With Quote
  #12  
Old 08.02.2022, 15:35
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Hier eine Beispiel-Regel, die jeweils nur die "big_icons" URL extrahiert:
Code:
[
  {
    "enabled": true,
    "logging": false,
    "maxDecryptDepth": 1,
    "name": "example models-resource.com find picture direct-URLs for single models",
    "pattern": "**External links are only visible to Support Staff**,
    "rule": "DEEPDECRYPT",
    "deepPattern": "(/resources/big_icons/[0-9]+/[0-9]+\\.png)"
  }
]
Regel als plaintext:
pastebin.com/raw/5mpE0fm7

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #13  
Old 09.02.2022, 20:32
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Super, funktioniert, jetzt alles.
Hab nur noch ne allerletzte Frage.
Da ich ja alles auf einmel reinkopiere und zum Schluss nicht mehr weiß in welchen Ordner die Bilder gehören.
Kann man jetzt z.B. die Bilder (40404, 40403, 40402, 40401...) beim einfügen entweder den Namen aus dem Link:
"**External links are only visible to Support Staff**

"3dchallengee3techdemo" geben -> 3dchallengee3techdemo40404

https://abload.de/image.php?img=1231djko.png

oder er erstellt automatisch einen Ordner mit 3dchallengee3techdemo in dem die Bilder drinnen sind?

Evtl. auch irgendwas anderes
danke

Last edited by zToRm777; 09.02.2022 at 20:36.
Reply With Quote
  #14  
Old 15.02.2022, 16:48
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Ja das ist möglich.
Beispiel Packagizer Regel für models-resource.com:


Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #15  
Old 24.02.2022, 00:20
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Funktioniert, Pakete werden im JD erstellt, Bilder aber leider offline.

Bilder sind aber auf jedenfall online, da ich diese ohne der regel schon drinnen hatte

hm ;(
Reply With Quote
  #16  
Old 24.02.2022, 13:33
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Funktioniert hier einwandfrei (nur getestet mit models-resource.com).
Bitte poste Testlinks und einen Log.

-psp-
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #17  
Old 24.02.2022, 16:13
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

**External links are only visible to Support Staff****External links are only visible to Support Staff**
**External links are only visible to Support Staff****External links are only visible to Support Staff**
**External links are only visible to Support Staff****External links are only visible to Support Staff**

24.02.22 15.10.20 <--> 24.02.22 15.14.32 jdlog://3285925302851/
Reply With Quote
  #18  
Old 24.02.2022, 16:22
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Die Links in deinem Log lassen vermuten, dass du noch die nicht funktionierende REWRITE Regel aus Post #10 verwendest.
Nimm die Regel aus Post #12, um funktionierende Direktlinks zu erhalten.
Da du die Regel zum "Erkennen" der .zip Downloadlinks vermutlich auch verwenden möchtest, würdest du vermutlich gerne diese beiden Regeln zusammen verwenden also z.B. so:
Code:
[
  {
    "enabled": true,
    "logging": false,
    "maxDecryptDepth": 1,
    "name": "example models-resource.com find picture direct-URLs for single models",
    "pattern": "**External links are only visible to Support Staff**,
    "rule": "DEEPDECRYPT",
    "deepPattern": "(/resources/big_icons/[0-9]+/[0-9]+\\.png)"
  },
  {
    "enabled": true,
    "logging": false,
    "maxDecryptDepth": 1,
    "name": "example models-resource.com accept direct URLs",
    "pattern": "**External links are only visible to Support Staff**,
    "rule": "DIRECTHTTP"
  }
]
Plaintext für einfacheres Kopieren & Einfügen:
pastebin.com/raw/ehVMWhJh

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?

Last edited by pspzockerscene; 24.02.2022 at 16:23. Reason: Plaintext pastebin Link ergänzt
Reply With Quote
  #19  
Old 25.02.2022, 19:58
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Jetzt klappt alles, danke
Reply With Quote
  #20  
Old 25.02.2022, 20:08
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Super
Danke für dein Feedback.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #21  
Old 21.03.2022, 16:47
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Hey hab derzeit was schwieriges und dies bereits per Script geladen, leider funktioniert das nicht komplett.

**External links are only visible to Support Staff****External links are only visible to Support Staff**

sind 26 Seiten mit 96 Animationen pro Seite

Unter dem Download-Link kann man verschiedene Formate auswählen.

Ab und zu gibt es noch ein par "Packs" die mehrere Animationen enthalten

Kann man sowas auch irgendwie in JD2 reinkopieren (mit dem Namen unter dem Bild)

und auch evtl. das Bild dazu (kein muss)

thx
Reply With Quote
  #22  
Old 21.03.2022, 16:49
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Scheinbar wird dafür ein Account benötigt -> Ohne Zugangsdaten kann ich da keine Aussage treffen.
Zugangsdaten bitte schicken an: support@jdownloader.org.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #23  
Old 21.03.2022, 17:47
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Hab die Daten geschickt
Reply With Quote
  #24  
Old 21.03.2022, 18:37
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Ich hab mir die Seite mixamo.com soeben angeschaut, hier meine Meinung dazu:
1. Die Webseite arbeitet nicht mit sichtbaren URLs in der Adresszeile.
Das ist schonmal schlecht und bedeutet eigentlich, dass man wenn dann einen Crawler schreiben müsste, der die komplette Seite crawlt, wenn man den Link zur Hauptseite einfügt -> Machen wir eigentlich nicht.
2. Die Seite gehört zu Adobe und ein Account wird benötigt.
Der Login Prozess ist ebenfalls kompliziert.
3. Nein mit den simplen LinkCrawler Regeln kann man hier gar nichts erreichen.
Von dieser Seite ließe sich nur mit extra dafür geschriebenen Skripten/JD Plugin "komfortabel" herunterladen.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?

Last edited by pspzockerscene; 21.03.2022 at 18:39. Reason: Name der Webseite ergänzt
Reply With Quote
  #25  
Old 21.03.2022, 19:00
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Ein Script für Chrome hab ich hier:

**External links are only visible to Support Staff****External links are only visible to Support Staff**

Hilft aber nichts oder?

Mit dem kann ich z.B. alles einfach laden, kann man das irgendwie verwenden?
Reply With Quote
  #26  
Old 21.03.2022, 19:04
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Wenn du JD zum Download verwenden möchtest, kannst du es ggf. entsprechend so abändern, dass es die Links nur sammelt und ausgibt statt sie direkt per Browser zu laden.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #27  
Old 22.03.2022, 23:37
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Ich würde es auch einzeln laden, nur das Problem ist, sobald ich die Seite wechsel oder aktualisiere, mischt er alle Animationen wieder. Es ist unmöglich alles richtig zu laden, egal wie.

Würde nur gehen, wenn alles auf 1 Seite wäre, aber es geht nur 96.

Mal nur so als Frage, würdet ihr gegen Bezahlung was machen, damit man alles laden kann? Kostenlos macht Ihr das ja bestimmt nicht, nur wegen mir xD.
Crawler oder Plugin?
Reply With Quote
  #28  
Old 23.03.2022, 13:01
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Quote:
Originally Posted by zToRm777 View Post
Ich würde es auch einzeln laden, nur das Problem ist, sobald ich die Seite wechsel oder aktualisiere, mischt er alle Animationen wieder. Es ist unmöglich alles richtig zu laden, egal wie.

Würde nur gehen, wenn alles auf 1 Seite wäre, aber es geht nur 96.
Das verstehe ich nicht ganz.
Intern wird es ja wohl irgendeine fixe Sortierung/Ordnung geben?

Quote:
Originally Posted by zToRm777 View Post
Mal nur so als Frage, würdet ihr gegen Bezahlung was machen, damit man alles laden kann? Kostenlos macht Ihr das ja bestimmt nicht, nur wegen mir xD.
Nein.

Quote:
Originally Posted by zToRm777 View Post
Crawler oder Plugin?
Für diesen Fall wird mindestens ain Crawler-Plugin und ein Hoster Plugin (für den Login-Prozess) benötigt.
Ich empfehle dir folgende mögliche Lösungen:
  1. Selbst ein JD Plugin schreiben
  2. Einen Freelancer damit beauftragen
  3. Auf GitHub o.ä. nach fertigen Scripten für genau diese Aufgabe schauen.
  4. Nach generischen Tools / Browser-Addons (z.B. VideoDownloadHelper ->Kann auch Animationen und Bilder erkennen) suchen und diese ausprobieren

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?

Last edited by pspzockerscene; 23.03.2022 at 13:01. Reason: Zitat repariert
Reply With Quote
  #29  
Old 05.04.2022, 00:11
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Hey,

hab da mal ne Frage zu dem:

[
{
"enabled": true,
"logging": false,
"maxDecryptDepth": 1,
"name": "example textures-resource.com find picture direct-URLs for single models",
"pattern": "**External links are only visible to Support Staff**,
"rule": "DEEPDECRYPT",
"deepPattern": "(/resources/big_icons/[0-9]+/[0-9]+\\.png)"
},
{
"enabled": true,
"logging": false,
"maxDecryptDepth": 1,
"name": "example textures-resource.com accept direct URLs",
"pattern": "**External links are only visible to Support Staff**,
"rule": "DIRECTHTTP"
}
]

Ich hab schon mehreres ausprobiert, aber er lädt immer das falsche.
Ich will von den Seiten, z.B.: **External links are only visible to Support Staff****External links are only visible to Support Staff**

die Bilder mit Namen haben. Er lädt mir aber immer die Texturen, egal welchen Link ich verwende.

Hab eig. schon alle möglichen Variationen durch, aber immer das gleiche Ergebnis.
Reply With Quote
  #30  
Old 05.04.2022, 14:17
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Mir scheint als hättest du dich nach wie vor nicht wirklich mit den Regeln befasst und einfach irgendwelche Regeln zusammengewürfelt...

Hier ist eine Regel, die auf bestimmte textures-resource.com URLs lauscht und die Bilder rausholt.
Ob es das ist was du wolltest, kanns nur du wissen:
Code:
[
  {
    "enabled": true,
    "logging": false,
    "maxDecryptDepth": 1,
    "name": "example textures-resource.com find picture direct-URLs for single textures",
    "pattern": "**External links are only visible to Support Staff**,
    "rule": "DEEPDECRYPT",
    "deepPattern": "(/resources/sheets/[0-9]+/[0-9]+\\.png[^\"]*)"
  }
]
Regel als Plaintext zum einfacheren Kopieren/Einfügen:
pastebin.com/raw/ssjRGFkx

Es ist eine veränderte Version der ersten Regel in meinem Post #18.
Angepasst wurden:
- Die Domain überall (also auch im pattern)
- Der Wert bei deepPattern, da die textures-resource.com Webseite nunmal andere Bilder-URLs hat als die models-resource Webseite.

Wenn man wollte könnte man natürlich auch hier alle 4 Regeln für die beiden Webseiten zusammenpacken.

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #31  
Old 05.04.2022, 15:22
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Bei anderen Seiten hab ich den Crawler selbst erstellt und hat alles geklappt, nur bei dieser Seite funktionierts einfach nicht.

Das böde ist hier:
**External links are only visible to Support Staff****External links are only visible to Support Staff**
und
**External links are only visible to Support Staff****External links are only visible to Support Staff**

Einmal Bild, einmal Texture.
Es werden beide reinkopiert.
Reply With Quote
  #32  
Old 05.04.2022, 15:45
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Okay ich glaube ich weiß ungefähr was passiert und was du erwartest.
Derzeit und mit der Regel aus meinem letzten Post:
Die Regel greift für solche Links:
textures-resource.com/playstation_2/crashtwinsanity/texture/5215/
...und holt dann diese:
textures-resource.com/resources/sheets/6/5215.png

Was du aber willst ist, dass du folgenden Link einfügst:
textures-resource.com/update-39/showall/#updatesheets
...und er sich dann alle von den "/texture/" Links holt, die wiederum über die Regel laufen und die Regel holt dann die Bilder Direktlinks.

Derzeit passiert aber folgendes:
1. Du fügst den hier ein:
textures-resource.com/update-39/showall/#updatesheets
2. Für den gibt es weder nen Plugin noch ne Regel also wandert der standard deep-crawler durch den html Code und sucht alles an Links was er finden kann.

Wenn du also möchtest, dass beim Einfügen von diesen nennen wir sie mal "/showall/" Links eben nur die "/texture/" Links gefunden werden, brauchst du genau dafür eine weitere LinkCrawler Regel.

Ist das soweit korrekt?

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
  #33  
Old 05.04.2022, 17:23
zToRm777 zToRm777 is offline
Bandwidth Beast
 
Join Date: May 2019
Posts: 139
Default

Ich füge den hier ein:
textures-resource.com/update-39/showall/#updatesheets
und er lädt dann alle Bilder die auf der Seite zu sehen sind, die mit dem link anfangen:
**External links are only visible to Support Staff****External links are only visible to Support Staff**..................................
und
**External links are only visible to Support Staff****External links are only visible to Support Staff**................................
soll er nicht finden, da ich sonst die Texturen wieder mit drinnen hab
Reply With Quote
  #34  
Old 05.04.2022, 17:38
pspzockerscene's Avatar
pspzockerscene pspzockerscene is offline
Community Manager
 
Join Date: Mar 2009
Location: Deutschland
Posts: 70,922
Default

Anhand dieser Antwort kann ich wieder nur mutmaßen was du möchtest.
Bitte in Zukunft statt "ich möchte die Textur" oder "das Bild" konkret beschreiben was z.B.:
Ich möchte, diesen Link einfügen:
textures-resource.com/playstation_2/crashtwinsanity/texture/5215/
...
dann solche finden:
textures-resource.com/playstation_2/crashtwinsanity/texture/5215/
...und am ende genau diese laden:
textures-resource.com/resources/sheets/6/5215.png


Ich habe mal ne Regel erstellt, die die "/texture/" URLs holt welche dann nochmals durch die zweite Regel wandern, welche dann die BilderURLs holt wie z.B.:
textures-resource.com/playstation_2/crashtwinsanity/texture/5215/
-->
textures-resource.com/resources/sheets/6/5215.png
--> Das scheinen die Texturen zu sein.
Falls du stattdessen die Bilder möchtest, müsstest du die zweite Regel entsprechend anpassen.

Regeln:
Code:
[
  {
    "enabled": true,
    "logging": false,
    "maxDecryptDepth": 1,
    "name": "example textures-resource.com find picture direct-URLs for single textures",
    "pattern": "**External links are only visible to Support Staff**,
    "rule": "DEEPDECRYPT",
    "deepPattern": "\"([^\"]+/texture/([0-9]+)/)"
  },
  {
    "enabled": true,
    "logging": false,
    "maxDecryptDepth": 1,
    "name": "example textures-resource.com find picture direct-URLs for single textures",
    "pattern": "**External links are only visible to Support Staff**,
    "rule": "DEEPDECRYPT",
    "deepPattern": "(/resources/sheets/[0-9]+/[0-9]+\\.png[^\"]*)"
  }
]
Regeln als Plaintext:
pastebin.com/raw/GJR2cmSN

Grüße, psp
__________________
JD Supporter, Plugin Dev. & Community Manager

Erste Schritte & Tutorials || JDownloader 2 Setup Download
Spoiler:

A users' JD crashes and the first thing to ask is:
Quote:
Originally Posted by Jiaz View Post
Do you have Nero installed?
Reply With Quote
Reply

Thread Tools
Display Modes

Posting Rules
You may not post new threads
You may not post replies
You may not post attachments
You may not edit your posts

BB code is On
Smilies are On
[IMG] code is On
HTML code is Off

Forum Jump

All times are GMT +2. The time now is 11:02.
Provided By AppWork GmbH | Privacy | Imprint
Parts of the Design are used from Kirsch designed by Andrew & Austin
Powered by vBulletin® Version 3.8.10 Beta 1
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.