<![CDATA[Multithread Prozesse und lesen aus großer Datei ????]]>hi,

ich habe eine ziehmlich große Datei die ich nicht in den RAM einlesen wollte.
Ich habe viele Threads die allerding auf diese Datei zugreifen müssen, und zwar
auf unterschiedliche zeilen. wie mache ich das am besten, immer von vorne anfangen und bis zu der gewissen zeile springen, ist ziehmlicher müll, die anzahl der threads ist auch variable, ich habe keine ahnung.

]]>https://www.c-plusplus.net/forum/topic/103985/multithread-prozesse-und-lesen-aus-großer-dateiRSS for NodeThu, 13 Aug 2026 14:47:17 GMTTue, 15 Mar 2005 11:17:26 GMT60<![CDATA[Reply to Multithread Prozesse und lesen aus großer Datei ???? on Tue, 15 Mar 2005 11:17:26 GMT]]>hi,

ich habe eine ziehmlich große Datei die ich nicht in den RAM einlesen wollte.
Ich habe viele Threads die allerding auf diese Datei zugreifen müssen, und zwar
auf unterschiedliche zeilen. wie mache ich das am besten, immer von vorne anfangen und bis zu der gewissen zeile springen, ist ziehmlicher müll, die anzahl der threads ist auch variable, ich habe keine ahnung.

]]>https://www.c-plusplus.net/forum/post/744890https://www.c-plusplus.net/forum/post/744890Tue, 15 Mar 2005 11:17:26 GMT<![CDATA[Reply to Multithread Prozesse und lesen aus großer Datei ???? on Tue, 15 Mar 2005 12:00:05 GMT]]>benutzt du windows? dann könnteste es mit 'file mapping' versuchen. guckst du: http://msdn.microsoft.com/library/default.asp?url=/library/en-us/fileio/base/createfilemapping.asp
damit holste dir teile der datei in den speicher und die threads können darauf zugreifen als wär's 'memory', brauchen also kein filehandling selber machen

]]>https://www.c-plusplus.net/forum/post/744921https://www.c-plusplus.net/forum/post/744921Tue, 15 Mar 2005 12:00:05 GMT<![CDATA[Reply to Multithread Prozesse und lesen aus großer Datei ???? on Tue, 15 Mar 2005 12:27:57 GMT]]>also gehts nicht ums in speicher laden, problem ist, die file ist 10mb groß, manche threads brauch vom anfang was andere wiederum vom ende. dann müsste ich ja also das ganze einlesen

]]>https://www.c-plusplus.net/forum/post/744944https://www.c-plusplus.net/forum/post/744944Tue, 15 Mar 2005 12:27:57 GMT<![CDATA[Reply to Multithread Prozesse und lesen aus großer Datei ???? on Tue, 15 Mar 2005 12:32:56 GMT]]>Was du suchst ist ein brauchbarer Chaching-Algorithmus... Mit MemoryMapped Files würdest du diese Aufgabe dem Betriebssystem auferlegen, welches (hoffentlich) schon einen solchen Algo verpasst gekriegt hat.
Insofern ist net's Vorschlag gar nicht so daneben.

Funktioniert übrigens nicht nur auf Windows... Nur ist der Mechanismus (API) bei *nixen z.B. bestimmt anders.

-junix

]]>https://www.c-plusplus.net/forum/post/744947https://www.c-plusplus.net/forum/post/744947Tue, 15 Mar 2005 12:32:56 GMT<![CDATA[Reply to Multithread Prozesse und lesen aus großer Datei ???? on Tue, 15 Mar 2005 12:35:41 GMT]]>okay, werde mich damit mal beschäftigen, übrigends unter linux gibt es das auch

http://216.239.59.104/search?q=cache:8q3CN8YunfEJ:cplus.kompf.de/memmap.html+File+Mapping+c%2B%2B&hl=de&lr=lang_de

danke

]]>https://www.c-plusplus.net/forum/post/744952https://www.c-plusplus.net/forum/post/744952Tue, 15 Mar 2005 12:35:41 GMT<![CDATA[Reply to Multithread Prozesse und lesen aus großer Datei ???? on Tue, 15 Mar 2005 13:17:10 GMT]]>Für sowas gibt es Datenbanken. Dies haben eine Suche bereits drin.

Oder du erstellst selbst eine Index.

]]>https://www.c-plusplus.net/forum/post/745000https://www.c-plusplus.net/forum/post/745000Tue, 15 Mar 2005 13:17:10 GMT