🚀 go-pugleaf

On 13.05.2013 15:02, M.M. wrote:
> W dniu poniedziałek, 13 maja 2013 14:23:11 UTC+2 użytkownik Michal Kleczek napisał:
>
>> Ok :-)
>> A moze wykazesz, ze dane w pliku sa na dysku ulozone sekwencyjnie
> Panowie przeciez mozna bardzo prosto, a zarzucacie mi ze jestem
> niedouczony. Co z Wami? Zapisujemy za posrednictwem systemu
> operacyjnego sekwencyjnie dane. Nastepnie mierzymy czas odczytu
> np. 1000 rekordow z poczatku pliku, a potem 1000 z losowych adresow.

I dowiadujemy się...nic.

Porównaj:
/dev/mapper/system-home:
  Timing cached reads:   9062 MB in  2.00 seconds = 4533.87 MB/sec
  Timing buffered disk reads: 306 MB in  3.00 seconds = 101.88 MB/sec

Jeżeli na bazie danych wymusisz dostęp do dysku w tym drugim trybie to 
nic dziwnego, że dostęp do "czystego" pliku w trybie pierwszym będzie 
"bardzo szybki", ale to dlatego, że już na początku spowolniłeś bazę 30 
razy.

>> Po trzecie - po co zlaczenia?
> A wiesz jakie korzysci plyna z dobrze znormalizowanej bazy danych, czy
> jak ktos proponuje dobra normalizacje to tez pytasz po co?

Poza oszczędnością miejsca i mniejszym czasem dostępu? No jakie?

Zbytnio znormalizowana baza to często błąd. Przy przetwarzaniu dużych 
wolumenów danych dane się specjalnie DEnormalizuje.

>
>
>> Po czwarte - jestes pewny, ze z RDBMS wycisnales co sie da? Robiles
>> analize planu zapytania? Uzyles najlepszych mozliwych indeksow? W
>> ostatecznosci - uzyles zmaterializowanych widokow?
> O... dochodzimy do sedna, a juz tracilem nadzieje. Materializowane widoki
> sa tym samym co mozna zrobic na plikach, tyle ze na plikach nie ma
> narzutu kobylastej bazy i moge se napisc w C++ procedure ktora po tym
> pliku przeiteruje i 1000 razy efektywniej przeprowadzi obliczenia niz
> w skrypciaku wewnetrznym bazy.

Nie ma też "udoskonaleń" bazy jak np nie wczytywanie jeszcze raz tego co 
zostało już wczytane.

>
>
>
>> Model relacyjny jest _logiczny_ i jako taki ma sie nijak do modelu
>> _fizycznego_. Mowienie o ograniczeniach modelu logicznego jest troche
>> bez sensu...
> A to ze glowny problem z wydajnoscia sie bierze z odszukiwania danych
> na podstawie relacji to oczywiscie jest niewazne.

Jeżeli jest to twoje główne ograniczenie to znaczy, ze masz skopaną 
strukturę. I tak, zrobienie tego samego na pliku będzie pewnie trochę 
szybsze. Tylko szybsze w sensie pisania tego byłoby użycie bazy zamiast 
pisania samemu jej fragmentów.

-- 
Pozdrawiam
Michoo