Website Crawl to Pic

Re: Website Crawl to Pic

Betriebsdirektor — Mon, 13 Mar 2017 13:51:11 GMT

http://phantomjs.org/

PhantomJS is an optimal solution for:

SCREEN CAPTURE
Programmatically capture web contents, including SVG and Canvas. Create web site screenshots with thumbnail preview.

Re: Website Crawl to Pic

Codename 47 — Fri, 10 Mar 2017 11:39:52 GMT

Komplette Domain offline speichern geht mit http://www.giga.de/downloads/winhttrack/
Dann hast aber alle Files und keine Bilder falls dir das auch hilft.

Re: Website Crawl to Pic

Lazy Jones — Tue, 07 Mar 2017 18:10:43 GMT

Das sind 2 separate Probleme.

Eine URL als Bild speichern ist einfach, da gibt's auch etliche webbasierte Dienste (z.B. http://capturefullpage.com )

Alle Seiten einer Domain zu finden ist nicht trivial, v.a. wenn sie dynamisch erzeugt sind. Da wirst du lange dran arbeiten, bzw. je nachdem, um welche Domain es sich handelt.

Vielleicht hilft das: https://www.xml-sitemaps.com

Oder eine Suchmaschine fragen: https://duckduckgo.com/?q=site%3Ageizhals.at&t=osx&ia=web
(was natürlich die für Suchmaschinen gesperrten Seiten ausschließt)

Re(3): Website Crawl to Pic

Diabolo2000 — Tue, 07 Mar 2017 18:04:38 GMT

Hab ich wieder nicht aufmerksam gelesen!

Re(2): Website Crawl to Pic

Diabolo2000 — Tue, 07 Mar 2017 18:02:44 GMT

das Programm müsste ja quasi einen Browser eingebaut haben oder aufrufen und
dann Screenshots machen?

Mit CefSharp ist das technisch kein Problem. Dort kann man einen headless Browser starten, die Größe von ihm ändern und Screenshots machen.
In einem Manntag wäre eine Umsetzung inklusive Spidering sicher möglich. Aber ich hab keine Zeit dazu!

Re: Website Crawl to Pic

mko — Tue, 07 Mar 2017 16:41:17 GMT

Würde mich wundern wenn es sowas gibt...das Programm müsste ja quasi einen Browser eingebaut haben oder aufrufen und dann Screenshots machen?

Vielleicht gibts ein Browser-Plugin? Hab das gefunden:
https://addons.mozilla.org/en-US/firefox/addon/grab-them-all/

Re(2): Website Crawl to Pic

j. — Tue, 07 Mar 2017 14:35:20 GMT

Ich weiß, daß der alle Bilder runterladen kann, aber kann der auch alle Webseiten als Bilder runderladen?

Re: Website Crawl to Pic

Diabolo2000 — Tue, 07 Mar 2017 14:03:03 GMT

So etwas nennt sich HTML Spider, der Free Download Manager kann das zum Beispiel.

Website Crawl to Pic

j. — Tue, 07 Mar 2017 13:50:17 GMT

Hello

Ich platzier das mal in dieser Kategorie:
Ich suche nach einer Möglichkeit alle Seiten einer Domain zu crawlen und als Bild (Format ist schnurz) abzuspeichern.
Ich brauch das zur Doku.

Kennt ihr da was?