Anzahl Files in einem Directory

[barnie]

Hallo Leute!

Ich möchte mir eine eigene Fotodatenbank programmieren und habe da ganz spezielle Vorstellungen. Alle schon vorhandene FotoDB bringen nicht das, was ich will. Nun eine technische Frage:

Wieviele Dateien kann ich unter Windows in ein Verzeichnis legen? sind 100000 und mehr ein Problem? Hat da jemand Erfahrungen oder gibt es Beschränkungen des Systems?
Ich will die Albumstruktur in einder Datenbank pflegen und alle Bilder in einem großen Verzeichnis halten....

Gruß RUDI

[dieter]

glaube, die anzahl spielt keine rolle !?

eher die summe der datengrößen !?

[barnie]

Hast du da Daten? Ich habe gerade ein Testprg geschrieben, das 100000 kleine Dateien in einem Verzeichnis anlegt... Mal sehen, was da passiert. Dann schaffe ich Platz und lege mal 100000 2MB große Dateien an... Wenn mein Server dann abraucht, weiss ich, dass es zuviel war!

RUDI

[dieter]

ne leider nicht !

meine hätte ich aber mal gehabt, daß blos eine bestimmte datengröße in ein verzeichnis gegangen wär !

kann mich aber täuschen, ist schon länger her !

bin mal gespannt, was bei deinem versuch herauskommt !

denke aber mal, daß du 100000 jpg bilder deren datengröße nicht zu groß ist reingeschrieben bekommst !

p.s.
melden sich sicher aber noch eib paar pc-spezialisten !?

[barnie]

nochwas zum System: W2003 Server.

Habe schon 60000 Dateien drin. Inzwischen dauert das Anlegen einzelner Dateien immer länger.

RUDI

[tracer]

NTFS: Max number of files
4,294,967,295 (2^32 − 1)
Viel Spass beim nachprüfen

[Mataschke]

Hab gerade irgendwas von theoretischen 16EXA Bytes gelesen!
Aber ich denke der Zugriff wird immer laaaaaaannnnngggggsssaaaammmeeer werden je mehr Dateien drin sind!

[Mataschke]

Hab gerade irgendwas von theoretischen 16EXA Bytes gelesen!
Aber ich denke der Zugriff wird immer laaaaaaannnnngggggsssaaaammmeeer werden je mehr Dateien drin sind!

Neee Quatsch! sorry war die Dateigrösse

[tracer]

Hab gerade irgendwas von theoretischen 16EXA Bytes gelesen!
Aber ich denke der Zugriff wird immer laaaaaaannnnngggggsssaaaammmeeer werden je mehr Dateien drin sind!

Nicht wirklich, im Rahmen dessen, was heute an Platten verfügbar ist, da die Verzeichnisstruktur in einen B+ Baum abgelegt ist.

[barnie]

mit 75000 Dateien lässt es sich noch vernünftig arbeiten. das Reinkopieren dauert etwas länger als sonst, das rauskopieren ist kein Problem. Rename und Veränderungen an den Dateien sollte es eigentlich keine geben, das soll alles in der DB abgehandelt werden. Mal sehen, wie das wird!

RUDI

[dieter]

...Aber ich denke der Zugriff wird immer laaaaaaannnnngggggsssaaaammmeeer werden je mehr Dateien drin sind!

ja genau !!!!
würd mir das mit den 100000 dateien in einem verzeichnis noch mal überlegen !?!?
würde dann eher einen verzeichnisnamen mehrmals nehmen und durchnummerieren !
Beispeil: barnie01, barnie02 usw.
dann in barnie01 alle dateien die mit a anfangen, in barni02 alle dateien die mit b anfangen usw. !?

[barnie]

100000 war die angenommene Obergrnze für die nächsten 10 Jahre. Hatte in den vergangenen 8 Jahren 58000 Fotos gemacht. Die bleiben in der alten DB.

Ich möchte sowenig wie möglich Datenverkehr auf der Platte haben. Wenn ich heute Fotos von einem Album ins nächste umziehe, weil sich mal wieder ne neue Struktur ergeben hat, werden alle Bilder immer umkopiert. Wenn das über einDB zu regeln geht, dann wird einfach der Eintrag im Bild-Datensatz geändert. Auch sind dann problemlos mehrere "Verzeichnisse" pro Bild möglich, ohne die Bilddaten mehrfach zu halten. Wenn ich an die Grenzen der FileSystem-Performance stoße, kann ich immer noch die Daten in Verzeichnisse aufteilen und dann meine eigenen Prgs anpassen.

Danke für eure Hilfen!

RUDI

[Wolfi]

ja genau !!!!

Nein, genau nicht! Ist schon so wie Tracer geschrieben hat. Der Index wird als B-Baum verwaltet.
Diese Bäume haben die Eigenschaft, das fast völlig unabhängig von der Zahl der Einträge immer
nur 3 Zugriffe für die Suche nötig sind...

[barnie]

Das finden und zufällige rauskopieren bei 100000Dateien im Verzeichnis geht super schnell... Was etwas dauert, aber zu verkraften ist, ist das einfügen von neuen Dateien und das Löschen von Dateien. Aber das passiert sehr selten und sollte kein Problem darstellen!

RUDI

[speedy]

Hmm .... und dann geht dir irgendwann mal die DB kaputt und du hast da hunderttausend Dateien, die du per Hand sortieren darfst ... viel Spaß. Also ich würde die auch irgendwie noch in Verzeichnisse unterteilen - je nach Anlaß, Album oder so.


MFG,
speedy