Register Guidelines E-Books Search Today's Posts Mark Forums Read

Go Back   MobileRead Forums > Non-English Discussions > Deutsches Forum > E-Books

Notices

Reply
 
Thread Tools Search this Thread
Old 04-03-2015, 09:25 AM   #1
Ranwhp
Junior Member
Ranwhp began at the beginning.
 
Ranwhp's Avatar
 
Posts: 6
Karma: 10
Join Date: Jun 2012
Device: Huawei Media Pad 10 FHD
Alle eBooks auf einmal runterladen?

Ist es möglich alle deutschen Bücher in der Wikiliste auf einmal runterzuladen? Weil alle anklicken und dann in dem entsprechenden Post auszuwählen ist echt...
Hab zwar schon um die hälfte aber naja..

Ist es irgendwie möglich? Vielleicht mit scripts?

Danke!
Ranwhp is offline   Reply With Quote
Old 04-16-2015, 05:51 PM   #2
skreutzer
PublishingToolsDeveloper
skreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exercise
 
skreutzer's Avatar
 
Posts: 99
Karma: 38234
Join Date: Jan 2014
Location: Germany
Device: Only devices that support open formats!
Mit den Programmen GNU Wget und cURL dürfte das hinzubekommen sein. Um den Server nicht unnötig zu belasten, empfiehlt es sich, per Kommandozeilenparameter eine Verzögerung zwischen zwei Download-Vorgängen festzulegen.
skreutzer is offline   Reply With Quote
 
Advertisement
Old 04-17-2015, 08:40 AM   #3
Ranwhp
Junior Member
Ranwhp began at the beginning.
 
Ranwhp's Avatar
 
Posts: 6
Karma: 10
Join Date: Jun 2012
Device: Huawei Media Pad 10 FHD
Das Problem was ich immer hatte mit meinem Überlegungen ist, dass die Wikiliste nur auf den Thread verweist wo dann der Link für das Buch ist und dieses über zwei Wege dahin... war immer mein Problem.
Ranwhp is offline   Reply With Quote
Old 04-18-2015, 03:25 AM   #4
skreutzer
PublishingToolsDeveloper
skreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exercise
 
skreutzer's Avatar
 
Posts: 99
Karma: 38234
Join Date: Jan 2014
Location: Germany
Device: Only devices that support open formats!
Ich habe mittlerweile die Wiki-Liste der deutschen Bücher gefunden und fürchte, dass das schon allein deswegen nicht so einfach sein dürfte, weil die EPUBs als generisches Attachment am Thread hängen und nicht von anderen Attachments zu unterscheiden wären, wenn welche vorhanden wären. Insofern müsste man wohl schon ein Script schreiben, aber weil es sich so anhört, als ob du die Aufgabenstellung schon händisch bewältigt hast, braucht man den Aufwand dafür nicht investieren, oder? Für andere Nutzer und die anderen Sprachen wäre so ein Script aber trotzdem ganz interessant, oder nicht? Gibt es jemanden, der das gerne hätte?

Last edited by skreutzer; 04-18-2015 at 05:23 AM.
skreutzer is offline   Reply With Quote
Old 04-25-2015, 09:53 AM   #5
Ranwhp
Junior Member
Ranwhp began at the beginning.
 
Ranwhp's Avatar
 
Posts: 6
Karma: 10
Join Date: Jun 2012
Device: Huawei Media Pad 10 FHD
Ja hab schon einege per Hand, aber halt einige auch nicht.. und meine Zeit ist im Moment wegen der Schule knapp bemessen (Ok, Zeit fürs lesen hab ich noch und ein wenig um die ganzen Metadaten, welche in einigen Büchern doch teilweise Schrott sind: Erscheinungsjahr, Verlag usw.)

Aber das anstrengende ist halt aus der wiki liste immer den Thread zu öffnen und dann noch runterzuladen, dass dauert dann doch schon.

Und naja wäre iwie schön wen es sone Funktion geben würde
Ranwhp is offline   Reply With Quote
Old 04-26-2015, 06:40 PM   #6
skreutzer
PublishingToolsDeveloper
skreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exercise
 
skreutzer's Avatar
 
Posts: 99
Karma: 38234
Join Date: Jan 2014
Location: Germany
Device: Only devices that support open formats!
Ich habe soeben eine erste Fassung eines Workflows fertiggestellt, der genau das macht. Zwar macht der das nicht sonderlich intelligent und muss noch etwas aufgeräumt werden, in den nächsten Tagen jedoch gedenke ich, dessen einzelne Teile nach und nach zu veröffentlichen und ein Download-Package zusammenzuschnüren. Ist in Java programmiert.
skreutzer is offline   Reply With Quote
Old 05-01-2015, 02:38 PM   #7
Ranwhp
Junior Member
Ranwhp began at the beginning.
 
Ranwhp's Avatar
 
Posts: 6
Karma: 10
Join Date: Jun 2012
Device: Huawei Media Pad 10 FHD
Nice! Freu mich schon darauf
Ranwhp is offline   Reply With Quote
Old 05-01-2015, 05:43 PM   #8
skreutzer
PublishingToolsDeveloper
skreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exerciseskreutzer juggles running chainsaws for a bit of light exercise
 
skreutzer's Avatar
 
Posts: 99
Karma: 38234
Join Date: Jan 2014
Location: Germany
Device: Only devices that support open formats!
Ein paar Details zur Implementierung: heruntergeladen werden die Thread-Anhänge derjenigen Links, die in der Tabelle mit „ePub“ beschriftet sind. Ein Aufruf des Programms dauert relativ lange, denn zwischen zwei Downloads ist eine Verzögerung von 5 Sekunden eingebaut, um den Server nicht zu überlasten, und die sollte auch nicht reduziert werden, weil das sonst mit Sicherheit gegen die Nutzungsbedingungen verstoßen und eine Art DoS-Attacke darstellen würde. Dadurch ergibt sich aber bei ca. 2200 Links aus der Tabelle, für welche jeweils der dazugehörige Thread und dann die Anhänge herunter geladen werden müssen, 6+ Stunden. Erschwerend kommt hinzu, dass die XSLT-Transformation, welche die Anhang-Links aus den Threads extrahiert, jedes Mal die DTDs und das Stylesheet neu einlesen muss, statt den vorhandenen Prozessor wiederverwenden zu können, was eine zusätzliche Verzögerung zur Folge hat. Insgesamt gesehen sollte man das Programm also besser nebenher mal laufen lassen, und jetzt nicht sofort ein Ergebnis erwarten.

Ferner wird nicht geprüft, ob ein Anhang bereits schon einmal heruntergeladen wurde oder ob Namenskonflikte bestehen, die Dateien werden im Ergebnis-Verzeichnis ohne Rückfrage überschrieben. Weil deutschsprachige Threads in ISO-8859-1 statt in UTF-8 encodiert sind, meine unixoide Betriebssystem-Umgebung aber von Haus aus UTF-8 zugrundelegt, enthalten die Dateinamen im Ergebnis-Verzeichnis dann nicht darstellbare Sonderzeichen.

Der Quellcode ist hier veröffentlicht: github.com/publishing-systems/clients. Brauchst du ein vorbereitetes Download-Package davon, für welches Betriebssystem?

Last edited by skreutzer; 05-02-2015 at 03:57 AM.
skreutzer is offline   Reply With Quote
Reply

Thread Tools Search this Thread
Search this Thread:

Advanced Search

Forum Jump

Similar Threads
Thread Thread Starter Forum Replies Last Post
Calibre - Runterladen von News wolfkalb Software 5 12-05-2011 09:22 AM
Deutsche ebooks auf Kobobooks.com Poppaea E-Books 8 09-27-2011 10:55 PM
Kindle DX graphite Review - Es war einmal... Passepartout Amazon Kindle 125 06-05-2011 08:20 AM
20% Rabatt auf alle Amazon mp3s! blogbook Lounge 5 03-02-2010 05:24 AM
Alle eBooks ohne DRM beam Deutsches Forum 10 06-07-2009 03:56 PM


All times are GMT -4. The time now is 01:31 PM.


MobileRead.com is a privately owned, operated and funded community.