<![CDATA[Ich will mir das Internet herunterladen (Kein Trollbeitrag!)]]>Hallo,

auch wenn der Titel natürlich gleich wieder nach nem billigen Troll klingt, ich plane derzeit zusammen mit einem Kumpel in der Tat einen "Snapshot" des Internets zu laden, wie es 2010 aussieht. Nächstes Jahr im Januar soll das Projekt beginnen und in einem möglichst "viel" des Internets speichern!

Es stehen mir 100 MBit/s an Bandbreite zur Verfügung, an denen 5 Rechner mit Dual-Core Prozessoren hängen werden. Jedem Rechner stehen 8 TB interner Festplattenspeicher zur Verfügung, zusätzlich habe alle Zugriff auf ein gemeinsames 80 TB NAS, insgesamt also 120 TB Speicher.

Die benötigte Software befindet sich derzeit noch in Entwicklung, die Hardware ist zu weiten teilen schon vorhanden.

Damit möglichst viel guter Content gesammelt wird, startet das Crawling von Wikipedia (zahlreiche Quellenangaben) und einigen Webkatalogen aus.

Wollte ich jetzt mal gesagt haben!

]]>https://www.c-plusplus.net/forum/topic/246748/ich-will-mir-das-internet-herunterladen-kein-trollbeitragRSS for NodeWed, 15 Apr 2026 16:07:59 GMTSat, 01 Aug 2009 00:23:25 GMT60<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 00:23:25 GMT]]>Hallo,

auch wenn der Titel natürlich gleich wieder nach nem billigen Troll klingt, ich plane derzeit zusammen mit einem Kumpel in der Tat einen "Snapshot" des Internets zu laden, wie es 2010 aussieht. Nächstes Jahr im Januar soll das Projekt beginnen und in einem möglichst "viel" des Internets speichern!

Es stehen mir 100 MBit/s an Bandbreite zur Verfügung, an denen 5 Rechner mit Dual-Core Prozessoren hängen werden. Jedem Rechner stehen 8 TB interner Festplattenspeicher zur Verfügung, zusätzlich habe alle Zugriff auf ein gemeinsames 80 TB NAS, insgesamt also 120 TB Speicher.

Die benötigte Software befindet sich derzeit noch in Entwicklung, die Hardware ist zu weiten teilen schon vorhanden.

Damit möglichst viel guter Content gesammelt wird, startet das Crawling von Wikipedia (zahlreiche Quellenangaben) und einigen Webkatalogen aus.

Wollte ich jetzt mal gesagt haben!

]]>https://www.c-plusplus.net/forum/post/1753282https://www.c-plusplus.net/forum/post/1753282Sat, 01 Aug 2009 00:23:25 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 00:49:27 GMT]]>Mit so wenig Speicherplatz kommst du aber nicht sehr weit. Also mal angenommen, du willst auch Content mitladen.

]]>https://www.c-plusplus.net/forum/post/1753285https://www.c-plusplus.net/forum/post/1753285Sat, 01 Aug 2009 00:49:27 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 01:21:02 GMT]]>Wow. Ich bin so begeistert.

Wollte ich mal dahergelogen haben.

]]>https://www.c-plusplus.net/forum/post/1753289https://www.c-plusplus.net/forum/post/1753289Sat, 01 Aug 2009 01:21:02 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 04:00:05 GMT]]>Google lädt das Internet alle ca. 3 Tage runter.

]]>https://www.c-plusplus.net/forum/post/1753298https://www.c-plusplus.net/forum/post/1753298Sat, 01 Aug 2009 04:00:05 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 04:58:08 GMT]]>hustbaer schrieb:

Wow. Ich bin so begeistert.

Wollte ich mal dahergelogen haben.

Deine Lichttools begeistern mich auch enorm, hab in meiner Euphorie gleich alle Lichter im Haus ausgemacht weil dein Programm viel besser ist als jede Lampe!

Und das ist auch die Wahrheit.

]]>https://www.c-plusplus.net/forum/post/1753300https://www.c-plusplus.net/forum/post/1753300Sat, 01 Aug 2009 04:58:08 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 05:44:08 GMT]]>Letztes Jahr wurde die Kapazitaet des Internets auf ~ 250 Exabyte geschaetzt.
Selbst wenn Du die Pornos nicht saugst, wird Dein Speicher nicht mal im Ansatz reichen.
Von der Urheberrechtlichen Seite wollen wir mal ganz schweigen.

]]>https://www.c-plusplus.net/forum/post/1753302https://www.c-plusplus.net/forum/post/1753302Sat, 01 Aug 2009 05:44:08 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 07:56:55 GMT]]>Hi,

und wenn Du jetzt Deine Bandbreite von 100MBit damit einbeziehst,
brauchst Du ewig für die Sicherung und von einem Snapshot ist da nicht mehr die Rede.

Selbst wenn Du eine gute Datenkompression am Start hast, bekommst Du auf Deinen Festplatten eigentlich nichts gesichert. Die sind voll, bevor Du wirklich angefangen hast.

Gruss Ritchie

]]>https://www.c-plusplus.net/forum/post/1753319https://www.c-plusplus.net/forum/post/1753319Sat, 01 Aug 2009 07:56:55 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 08:03:15 GMT]]>Das Internet ist überbewertet. Seit es auch für die Massen geöffnet ist, nervt es mich nur noch an.

]]>https://www.c-plusplus.net/forum/post/1753323https://www.c-plusplus.net/forum/post/1753323Sat, 01 Aug 2009 08:03:15 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 08:06:17 GMT]]>Ivo schrieb:

Letztes Jahr wurde die Kapazitaet des Internets auf ~ 250 Exabyte geschaetzt.
Selbst wenn Du die Pornos nicht saugst, wird Dein Speicher nicht mal im Ansatz reichen.

Ohne Pornos sind es nur ca. 472MB

]]>https://www.c-plusplus.net/forum/post/1753325https://www.c-plusplus.net/forum/post/1753325Sat, 01 Aug 2009 08:06:17 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 08:09:35 GMT]]>Wieviele Byte haben eigentlich alle deutschen Seiten?

]]>https://www.c-plusplus.net/forum/post/1753327https://www.c-plusplus.net/forum/post/1753327Sat, 01 Aug 2009 08:09:35 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 08:16:07 GMT]]>Kóyaánasqatsi schrieb:

Wieviele Byte haben eigentlich alle deutschen Seiten?

12.398.450.213.983 AFAIK.

]]>https://www.c-plusplus.net/forum/post/1753329https://www.c-plusplus.net/forum/post/1753329Sat, 01 Aug 2009 08:16:07 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 08:16:31 GMT]]>Hallo

Da kann man dann endlich offline surfen.

chrische

]]>https://www.c-plusplus.net/forum/post/1753330https://www.c-plusplus.net/forum/post/1753330Sat, 01 Aug 2009 08:16:31 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 08:24:31 GMT]]>Das Internet ist unterbewertet. Seit es auch für die Massen geöffnet ist, geilt es mich nur noch an.

]]>https://www.c-plusplus.net/forum/post/1753331https://www.c-plusplus.net/forum/post/1753331Sat, 01 Aug 2009 08:24:31 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 08:25:05 GMT]]>Die Festplaten reichen ja nicht mal für rapidshare...

]]>https://www.c-plusplus.net/forum/post/1753332https://www.c-plusplus.net/forum/post/1753332Sat, 01 Aug 2009 08:25:05 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 08:26:49 GMT]]>Smörre schrieb:

Kóyaánasqatsi schrieb:

Wieviele Byte haben eigentlich alle deutschen Seiten?

12.398.450.213.983 AFAIK.

Quatsch 12.398.450.213.927

]]>https://www.c-plusplus.net/forum/post/1753334https://www.c-plusplus.net/forum/post/1753334Sat, 01 Aug 2009 08:26:49 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 09:16:48 GMT]]>www.archive.org

]]>https://www.c-plusplus.net/forum/post/1753359https://www.c-plusplus.net/forum/post/1753359Sat, 01 Aug 2009 09:16:48 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 09:18:47 GMT]]>hüberbro schrieb:

Smörre schrieb:

Kóyaánasqatsi schrieb:

Wieviele Byte haben eigentlich alle deutschen Seiten?

12.398.450.213.983 AFAIK.

Quatsch 12.398.450.213.927

Stimmt, sorry, ich hatte mich verzählt.

]]>https://www.c-plusplus.net/forum/post/1753364https://www.c-plusplus.net/forum/post/1753364Sat, 01 Aug 2009 09:18:47 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 09:19:37 GMT]]>

Ich will mir das Internet herunterladen (Kein Trollbeitrag!)

Bullshit! Nur weil du "kein Trollbeitrag" dazuschreibst, heisst es noch lange nicht, dass es keiner ist. Wie waere es mit "Selber denken, Glueck verschenken"?

]]>https://www.c-plusplus.net/forum/post/1753366https://www.c-plusplus.net/forum/post/1753366Sat, 01 Aug 2009 09:19:37 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 09:22:19 GMT]]>knivil schrieb:

Ich will mir das Internet herunterladen (Kein Trollbeitrag!)

Bullshit! Nur weil du "kein Trollbeitrag" dazuschreibst, heisst es noch lange nicht, dass es keiner ist. Wie waere es mit "Selber denken, Glueck verschenken"?

Kein Trolling @knivil.

]]>https://www.c-plusplus.net/forum/post/1753369https://www.c-plusplus.net/forum/post/1753369Sat, 01 Aug 2009 09:22:19 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 09:25:31 GMT]]>knivil schrieb:

Ich will mir das Internet herunterladen (Kein Trollbeitrag!)

Bullshit! Nur weil du "kein Trollbeitrag" dazuschreibst, heisst es noch lange nicht, dass es keiner ist. Wie waere es mit "Selber denken, Glueck verschenken"?

Troll ⚠

]]>https://www.c-plusplus.net/forum/post/1753375https://www.c-plusplus.net/forum/post/1753375Sat, 01 Aug 2009 09:25:31 GMT<![CDATA[Reply to Ich will mir das Internet herunterladen (Kein Trollbeitrag!) on Sat, 01 Aug 2009 09:27:18 GMT]]>knivil schrieb:

Ich will mir das Internet herunterladen (Kein Trollbeitrag!)

Bullshit! Nur weil du "kein Trollbeitrag" dazuschreibst, heisst es noch lange nicht, dass es keiner ist. Wie waere es mit "Selber denken, Glueck verschenken"?

@knivil: troll woanders rum.

]]>https://www.c-plusplus.net/forum/post/1753379https://www.c-plusplus.net/forum/post/1753379Sat, 01 Aug 2009 09:27:18 GMT