Daten in den Arbeitsspeicher legen

phlox81

Oliver1980 schrieb:

Wenn ich die Datei in den Hauptspeicher lese müsste das Ganze genauso schnell funktionieren und daher würde ich nur gerne wissen ob das geht oder nicht. Aber trotzdem danke für deinen tollen Ratschlag

Genauso schnell als was ?
fgetc lies jedesmal von der Platte, und das ist langsam...
Rat mal warum es funktionen wie getline gibt, um mehr als ein Zeichen einzulesen...

Oliver1980

Ok wie würdest du aus eiener reihen von Zahlen wo du nicht weißt wie lang die einzelnen sind mit getline eine Zahl holen? Bsp
1.2333 444.556566 .....
Das geht meiner Meinung nach nicht. Da du bei jeden Zeichen kontrollieren mußt ob es sich um ein leer Zeichen handelt, und damit die nächste Zahl beginnt.

Ich hab gemeint es dauert länger für mich das zu Programmieren. Aber ist jetzt auch total egal. Also heißt das ich kann die Datei nicht als txt in Hauptspeicher legen?

Vorden

btw, so wie ich das sehe, machst du das mit der Überprüfung mit deiner switch-case Konstruktion gerade genauso, wie wenn du es mit getline machen würdest, du könntest es auch einfach so machen:

ifstream eingabe;
eingabe.open("File.txt");
ofstream ausgabe;
ausgabe.open("File2.txt");
char x[30];
eingabe>>x; //wenn du es mit den Operatoren >> machst, wird immer bis zum nächsten Leerzeichen gelesen und du kannst schrittweise vorgehen
//Verarbeitung
ausgabe<<x;
eingabe.close();
ausgabe.close();
//natürlich bei open() und close() noch auf good() prüfen, dann passt es

volkard

Vorden schrieb:

ifstream eingabe;
eingabe.open("File.txt");
ofstream ausgabe;
ausgabe.open("File2.txt");
char x[30];
eingabe>>x; //wenn du es mit den Operatoren >> machst, wird immer bis zum nächsten Leerzeichen gelesen und du kannst schrittweise vorgehen
//Verarbeitung
ausgabe<<x;
eingabe.close();
ausgabe.close();
//natürlich bei open() und close() noch auf good() prüfen, dann passt es

ifstream eingabe("File.txt");
ofstream ausgabe("File2.txt");
string x;
eingabe>>x; //wenn du es mit den Operatoren >> machst, wird immer bis zum nächsten Leerzeichen gelesen und du kannst schrittweise vorgehen
//Verarbeitung
ausgabe<<x;

phlox81

Oliver1980 schrieb:

Ok wie würdest du aus eiener reihen von Zahlen wo du nicht weißt wie lang die einzelnen sind mit getline eine Zahl holen? Bsp
1.2333 444.556566 .....
Das geht meiner Meinung nach nicht. Da du bei jeden Zeichen kontrollieren mußt ob es sich um ein leer Zeichen handelt, und damit die nächste Zahl beginnt.

Ich hab gemeint es dauert länger für mich das zu Programmieren. Aber ist jetzt auch total egal. Also heißt das ich kann die Datei nicht als txt in Hauptspeicher legen?

Ich würd es einfach direkt in ein float/double einlesen, wenns Komma zahlen sind...
Oder mir die Zahlen als String mit getline(stream,string,'separator') holen.
Da gibts viele Möglichkeiten. Nur was hat das damit zu tun, ne txt datei
in den arbeitsspeicher zu legen ?
Was machst / willst du mit deinem Programm erreichen ?

Oliver1980

Als float/double direkt einlesen ist nicht möglich, da ich in der Text Datei ja eine Asci folge habe und keine float Zahlen.
Will die Datei in den Arbeitsspeicher legen da auf sie immer wieder zu gegriffen wird. Das würde mein Programm ja dann sicher um ein vielfaches beschleunigen. Will eine Text Datei mit x Spalten nach den ersten 3 absteigend sortieren. Die Text datei hat bis zu 500000 Zeilen, daher der lange Rechenaufwand. Werde gleich mal die Verbesserungen von Vorden und volkard probieren denk mal das spart schon mal ne ganze Menge Zeit. Wenn das ganze dann noch von der Festplatte auf den Arbeitsspeicher verlegt werden könnte (die ganze txt )wäre es sicher noch schneller

Oliver1980

Bin grad dabei die Verbesserung ein zu bauen. Nur leider habe ich das Problem dass er die Zahlen nacheinander einliest aber jetzt nicht erkennt wenn ein Zeilenumbruch ist..

Vorden

Dann find ich wär in deinem Fall wohl es sinnvollste eben mit getline in char-Arrays zu schreiben und diese dann abzuspalten, wenn Leerzeichen kommen und anschließend mit atof(); für float oder atoi(); für int auf deine Variablen rüber zu schreiben

Oliver1980

Ja genauso mache ich es ja auch nur ebend nicht mit getline sondern getc. Getline geht bei mir nicht da ich immer wissen muss ob ' ' oder '/n'
meine folge trennt. Da ich bei ' ' was anderes als bei '/n' machen muss

Oliver1980

Ok, leider habe ich noch keine direkte Antwort auf meine Frage erhalten. Ich würde mich sehr freuen wenn jemand der Ahnung hat, ob ich eine txt in HS legen kann etwas dazu schreiben würde. Egal ob es geht oder nicht. Auch wenn das nicht möglich ist würde ich mich über eine Antwort freuen.

hehejo

Dann schau dir doch mal was zu MemoryMapping an.

Braunstein

Hallo,

Man könnte auch binär in einen char-Buffer einlesen (mit read oder so) und den dann bearbeiten.

Konfusius

in c++ gibt es string-streams

du kannst damit einen c++-string genauso bearbeiten wie eine datei. lies also die text-datei einfach in einen string-stream ein, bearbeite sie, und schreibe sie wieder zurück auf die platte.

miller_m

Konfusius schrieb:

in c++ gibt es string-streams
du kannst damit einen c++-string genauso bearbeiten wie eine datei. lies also die text-datei einfach in einen string-stream ein, bearbeite sie, und schreibe sie wieder zurück auf die platte.

mein reden

3 sachen:

0. hör' auf konfusius und miller_m. nimm stringstreams.
1. die chance ist groß, dass die fstreams von c++ die datei schon von sich aus "in den 'hauptspeicher'" laden. bin mir aber nicht sicher
2. der operator>> von fstream kann auch text-floats einlesen. angenommen du hast in einer textdatei "text.txt"

5 127.0 137.46
137.9 137.999 279.1 133.7

stehen.
dann wird das da:

ifstream i("text.txt");
float a[7];
i >> a[0]
i >> a[1]
i >> a[2]
i >> a[3]
// usw, kann auch ne schleife oder sonstwas sein

das array "a" mit den float-werten füllen. ganz ohne zeichenweises einlesen.

miller_m

ich würde sogar alles in ein string lesen und dann erst einen stringstream davon erzeugen. der syntax bleibt der gleiche.

template<typenmae Stream_>
void Parse(Stream &s)
{
    float x;
    s >> f;
    // usw
}

int main()
{
    // von datei lesen
    ifstream f("text.txt");
    Parse(f);
    f.close();
};
// oder alles in buffer lesen un komplett im speicher parsen
int main()
{
    std::string strBuffer;
    ReadFileInBuffer("text.txt", strBuffer);
    std::stringstream sstr(strBuffer);
    Parse(sstr);
};

miller_m schrieb:

std::stringstream sstr(strBuffer);

wird da nicht einmal unnötig umkopiert?

Oliver1980

OK danke für die Antworten, werde mich jetzt mal das Wochenende ran setzen und doch mal probieren das ganze mit den string stream zu machen. Also danke nochmal