habe ein kleines Problem beim erstellen von Textdateien.
Ich habe ein Programm das im 12-stelligen bereich Zeichenketten in eine Textdatei schreibt. Nun kommt es vor das diese Dateie über 5 Giga Byte groß werden.
Habe die Funktion fprintf() verwendet und die Strings einzeln mit "\n" jeweils getrennt. Der Dateityp war ".txt" und die Zeichen waren vom Typ "char" sowie die Strings vom Typ "char* ".

Wie kann ich diese Dateien kleiner halten?

MFG

V.R.

Danke für eure Antworten.

Ja diese Ideen hatte ich auch schon. Das Problem ist das jede Zeichenkette wichtig ist. Mich wundert nur das es Textdateien mit weit aus mehr Zeichen, und sogar mit Sonderzeichen gibt, die aber gerade mal 105kB haben...
Deshalb dachte ich, dass ich vielleicht eine andere Funktion dafür brauche.

Danke für eure Antworten.

Bei Textdateien gilt normalerweise 1 Zeichen ist ein Byte. Wenn Du aber UTF-8 benutzt benötigen manche Zeichen 2 Byte. Bei Unicode sind es sogar alle. Hast Du vielleicht so ein Problem?

mfg Martin

VRComputing schrieb:

Ja diese Ideen hatte ich auch schon. Das Problem ist das jede Zeichenkette wichtig ist. Mich wundert nur das es Textdateien mit weit aus mehr Zeichen, und sogar mit Sonderzeichen gibt, die aber gerade mal 105kB haben...
Deshalb dachte ich, dass ich vielleicht eine andere Funktion dafür brauche.

Danke für eure Antworten.

Bei Textdateien gilt normalerweise 1 Zeichen ist ein Byte. Wenn Du aber UTF-8 benutzt benötigen manche Zeichen 2 Byte. Bei Unicode sind es sogar alle. Hast Du vielleicht so ein Problem?

mfg Martin

selbst wenn das der fall sein sollte - offensichtlich hast du mindestens 2*1024*1024*1024 Zeichen in der Datei stehen - das die dann groß wird, sollte offensichtlich sein.
in C++ nutzt man im übrigen Streams um in eine Datei zu schreiben:

#include <fstream>

std::ofstream output("bla.txt");
output << 123 << std::endl;

bb

edit: C++-Doku:
http://www.cplusplus.com/
und dort die stream-doku:
http://www.cplusplus.com/reference/iostream/

Mich wundert nur das es Textdateien mit weit aus mehr Zeichen, und sogar mit Sonderzeichen gibt, die aber gerade mal 105kB haben...
Deshalb dachte ich, dass ich vielleicht eine andere Funktion dafür brauche.

Wie, mehr Zeichen?

Eine normale Textdatei kann nie kleiner sein als die Anzahl der Zeichen die drin gespeichert sind. Also bei 1 Mio. Zeichen muss die Textdatei immer >= 1 Mio. Bytes sein.

Und wenn deine deutlich grösser ist (z.B. mehr als doppelt so gross), dann machst du ziemlich sicher beim Schreiben irgendwas falsch.

in C++ nutzt man im übrigen Streams um in eine Datei zu schreiben:

Das schöne ist, dass es von boost die gängigen Kompressionsalgorithmen auch noch einmal als Stream gekapselt gibt. Das heißt, man muss nur das Streamobjekt austauschen und hat instant eine komprimierte Datei als Ausgabe.

Da du schon mit fprintf angefangen hast, nützt dir das natürlich herzlich wenig. So ein bisschen muss ich sagen: Selbst schuld. Willst du etwas vergleichbares mit fprintf erreichen, müsstest du das Standard fprintf mit einer eigenen Version ersetzen (mag gut sein, dass es dafür auch schon eine C Bibliothek gibt).

mein Grundlegendes Problem ist eigentlich das ich nicht verstehe wie es Textdateien geben kann die weitaus mehr Zeichen beinhalten als meine aber nicht mal größer als 1MB sind.

Zu der Frage oben wegen der Problematik:

Das Programm erstellt alle möglichen Permutation aus einer beliebigen Zeichenkette. Diese Permutationen möchte ich in, wenn es geht, EINER Textdatei speichern. Das Problem ist nur das man eine Textdatei mit 5GB nicht gut lesen/öffnen kann. Die Verwendung der Strings ist lediglich das Lesen zur Kontrolle sonst nichts.

MFG

V.R.

und da sind noch nicht mal die Zeilenumrbüche eingerechnet...

bb

PS: Für die permutationen gibt es ne schöne fertige Fkt.: http://www.cplusplus.com/reference/algorithm/next_permutation/

Das Problem ist nur das man eine Textdatei mit 5GB nicht gut lesen/öffnen kann.

Doch, kann man genauso schnell öffnen und genauso schnell überall lesen, nur alles auf einmal einlesen braucht natürlich länger.

VRComputing schrieb:

Das Problem ist nur das man eine Textdatei mit 5GB nicht gut lesen/öffnen kann.

Doch, kann man genauso schnell öffnen und genauso schnell überall lesen, nur alles auf einmal einlesen braucht natürlich länger.

ich denke, er redet vom einlesen weil er das öffnen mit wordpad(bzw notepad, das ich bei so großen dateien nicht mehr empfehlen würde^^) meinte - zumindest schrieb er danach, dass er die datei nur haben will, um die permutationen durchzugucken.

bb

Das Problem ist nur das man eine Textdatei mit 5GB nicht gut lesen/öffnen kann.

Nicht mit notepad.exe
Aber kannst

type dateiname

machen oder einen anderen Angucker nehmen, zum Beispiel den far file manager.

bb

! Heißt Fakultät und steht für die Menge aller möglichen Permutationen oder umgspr. "Kombinationen".

D.h. man hat bei 3 zeichen !3 Permutationen also 1*2*3 = 6

Soll das heißen es gibt keine Möglichkeit Zeichen noch kleiner zu machen?

!n = 1*2*3*...*n Zeichen

! Heißt Fakultät und steht für die Menge aller möglichen Permutationen oder umgspr. "Kombinationen".

D.h. man hat bei 3 zeichen !3 Permutationen also 1*2*3 = 6

Soll das heißen es gibt keine Möglichkeit Zeichen noch kleiner zu machen?

hast du mein posting überhaupt gelesen?

myself schrieb:

von wie vielen zeichen sprechen wir denn?
5 -> 5! *5 Zeichen => 600Byte
8 -> 8! *8 Zeichen => 322KByte
12->... => 5,7GByte

1. heißt es n!
2. wollte ich in dem posting die genaue zahl der zeichen erfahren - da nützt mir ein n herzlich wenig, so klug war ich auch davor schon...

doch, man kann sie kleiner machen:
-binär schreiben
oder
-komprimieren
oder
-nur jede x-te Permutation speichern

in jedem Fall würde man ein kleines Programm zum betrachten schreiben müssen.
wenn man nur jede x-te permutation speichert, muss man eben aufpassen, wie man x wählt, um in annehmbarer zeit an die y-te permutation zu kommen

bb

kann sein das ich mich verlesen habe und Danke für die Korrektur...
Ich gebe mich nun zufrieden.

MFG

V.R.