Pan John Kołalsky napisał:

>> Dostałem kiedyś dane zorganizowane w ten sposób, że tekstowe informacje
>> były w kilkudziesięciu tysiącach małych plików pogrupowanych w kilka
>> poziomów katalogów. Pierwsze co zrobiłem, to potraktowałem to wszystko
>> wzmiankowanym programem TAR (co się wkłada: TApe-ARchiver, czyli program
>> do zamiany struktry dysku na liniową reprezentację taśmy magnetycznej).
>> Teksty nie zmieniły swojej formy, każdy został tylko poprzedzony jednym
>> wierszem zawierającym dane o pliku i katalogu. I już dało się w tej kupie
>> wszystko wyszukiwać w mgnieniu oka, zamiast czekać kilkadziesiąt sekund
>> nim system operacyjny rozprawi się ze strukturą danych na dysku.
>
> To Ty chcesz to wszystko przeglądać a nie szukać. Zupełnie inny problem.

Potrzebowałem szukać. Szukać konkretnych słów, czy ogólniej łańcuchów
znaków. Ten problem został świetnie rozwiązany w opisany wyżej sposób.

> Do szukania jest indeks. System plików może indeksować pliki tak samo
> jak baza danych, że będzie odpowiadał na zapytanie dotyczące zawartości.

Ten indeks, to przede wszystkim trzeba (trzeba?) najpierw stworzyć. Gdybym
był jakimś za przeproszeniem koderem od baz danych, to też bym tak gadał
-- "panie, to trzeba najpierw zorganizować w bazę, projekt zrobić, zespół
stworzyć, kierownika powołać, dać trzy miesiące czasu itd". Ale to *JA*
potrzebowałem w tych danych *szukać*. I zrobiłem to w sposób optymalny --
innymi metodami nie dało się tego zrealizować ani szybciej, ani taniej.

> Np w katalogu "janek" mogą być wszystkie sms'y Janka a w katalogu
> "2013-07-07" dzisiejsze sms'y. Zapytanie systemu indeksującego dane
> będzie statystycznie wielokrotnie szybsze od ich przeglądnięcia.

Statystycznie, to może będzie szybsze, ale praktycznie dla mnie to nie
do przyjęcia. Trzymam wszystkie SMS-y w jednym pliku i nie mam problemu
ze znalezieniem wszystkich "od Janka" albo z "1 marca" (no dobra, niech
będzie, że maile a nie SMS-y).

--
Jarek