Daten in den Arbeitsspeicher legen

Oliver1980

Als float/double direkt einlesen ist nicht möglich, da ich in der Text Datei ja eine Asci folge habe und keine float Zahlen.
Will die Datei in den Arbeitsspeicher legen da auf sie immer wieder zu gegriffen wird. Das würde mein Programm ja dann sicher um ein vielfaches beschleunigen. Will eine Text Datei mit x Spalten nach den ersten 3 absteigend sortieren. Die Text datei hat bis zu 500000 Zeilen, daher der lange Rechenaufwand. Werde gleich mal die Verbesserungen von Vorden und volkard probieren denk mal das spart schon mal ne ganze Menge Zeit. Wenn das ganze dann noch von der Festplatte auf den Arbeitsspeicher verlegt werden könnte (die ganze txt )wäre es sicher noch schneller

Oliver1980

Bin grad dabei die Verbesserung ein zu bauen. Nur leider habe ich das Problem dass er die Zahlen nacheinander einliest aber jetzt nicht erkennt wenn ein Zeilenumbruch ist..

Vorden

Dann find ich wär in deinem Fall wohl es sinnvollste eben mit getline in char-Arrays zu schreiben und diese dann abzuspalten, wenn Leerzeichen kommen und anschließend mit atof(); für float oder atoi(); für int auf deine Variablen rüber zu schreiben

Oliver1980

Ja genauso mache ich es ja auch nur ebend nicht mit getline sondern getc. Getline geht bei mir nicht da ich immer wissen muss ob ' ' oder '/n'
meine folge trennt. Da ich bei ' ' was anderes als bei '/n' machen muss

Oliver1980

Ok, leider habe ich noch keine direkte Antwort auf meine Frage erhalten. Ich würde mich sehr freuen wenn jemand der Ahnung hat, ob ich eine txt in HS legen kann etwas dazu schreiben würde. Egal ob es geht oder nicht. Auch wenn das nicht möglich ist würde ich mich über eine Antwort freuen.

hehejo

Dann schau dir doch mal was zu MemoryMapping an.

Braunstein

Hallo,

Man könnte auch binär in einen char-Buffer einlesen (mit read oder so) und den dann bearbeiten.

Konfusius

in c++ gibt es string-streams

du kannst damit einen c++-string genauso bearbeiten wie eine datei. lies also die text-datei einfach in einen string-stream ein, bearbeite sie, und schreibe sie wieder zurück auf die platte.

miller_m

Konfusius schrieb:

in c++ gibt es string-streams
du kannst damit einen c++-string genauso bearbeiten wie eine datei. lies also die text-datei einfach in einen string-stream ein, bearbeite sie, und schreibe sie wieder zurück auf die platte.

mein reden

3 sachen:

0. hör' auf konfusius und miller_m. nimm stringstreams.
1. die chance ist groß, dass die fstreams von c++ die datei schon von sich aus "in den 'hauptspeicher'" laden. bin mir aber nicht sicher
2. der operator>> von fstream kann auch text-floats einlesen. angenommen du hast in einer textdatei "text.txt"

5 127.0 137.46
137.9 137.999 279.1 133.7

stehen.
dann wird das da:

ifstream i("text.txt");
float a[7];
i >> a[0]
i >> a[1]
i >> a[2]
i >> a[3]
// usw, kann auch ne schleife oder sonstwas sein

das array "a" mit den float-werten füllen. ganz ohne zeichenweises einlesen.

miller_m

ich würde sogar alles in ein string lesen und dann erst einen stringstream davon erzeugen. der syntax bleibt der gleiche.

template<typenmae Stream_>
void Parse(Stream &s)
{
    float x;
    s >> f;
    // usw
}

int main()
{
    // von datei lesen
    ifstream f("text.txt");
    Parse(f);
    f.close();
};
// oder alles in buffer lesen un komplett im speicher parsen
int main()
{
    std::string strBuffer;
    ReadFileInBuffer("text.txt", strBuffer);
    std::stringstream sstr(strBuffer);
    Parse(sstr);
};

miller_m schrieb:

std::stringstream sstr(strBuffer);

wird da nicht einmal unnötig umkopiert?

Oliver1980

OK danke für die Antworten, werde mich jetzt mal das Wochenende ran setzen und doch mal probieren das ganze mit den string stream zu machen. Also danke nochmal