🚀 go-pugleaf

On Saturday, August 1, 2020 at 1:36:37 PM UTC+2, al...@interia.pl wrote:
> W dniu piątek, 31 lipca 2020 10:50:56 UTC+2 użytkownik Borneq napisał:
> > On 7/30/20 10:05 PM, al...@interia.pl wrote:
> > > co to ma za znaczenie?
> > > Załadujesz w czasie kilku sekund tak czy siak.
> > > 
> > > przepust dysku: 100MB/s, czyli 1TB idzie w 10 s;
> > > na SSD w okolicach 2s;
> > > ram: zasuwa minimum z 4GB/s... 1/4 s.
> > > 
> > 
> > Nie 1 GB ale 1 TB
> > po drugie, tak szybko , z prędkością dysku, to działa odczyt danych, ale 
> > juz pakowanie do bazy nie. Gdyby insert działał kilka dni to było by 
> > jeszcze w porządku, obawiam się kilku miesięcy.
> > Na razie chcę przetestować bazę ArangoDB
> 
> obawiam się że takie coś przejdzie jedynie w 'memory db' w sensownym czasie,
> co finalnie można zapisać na dysk.
> https://en.wikipedia.org/wiki/List_of_in-memory_databases

Powiadacie że jeden terabait i że jeden terabait...

U mnie na podręcznym komputerze na zewnętrznym dysku SSD (usb 3.x):

[
time dd if=/dev/zero of=/tmp/test1.img bs=1G count=1 oflag=dsync
1+0 przeczytanych rekordów
1+0 zapisanych rekordów
1073741824 bytes (1,1 GB, 1,0 GiB) copied, 25,3014 s, 42,4 MB/s

real	0m25,387s
user	0m0,001s
sys	0m1,798s
]

25.3014*1024/3600 = 7.20h

Przy zapisie ciągłym można w praktyce dysk 1TB zapisać w kilka godzin. 

Gdy masz RAID, to praca na pełnej szybkości sata3
[
https://pl.wikipedia.org/wiki/Serial_ATA#SATA_III_(6_Gbit/s)
]

umożliwia nawet zapisanie całego dysku w trochę ponad pół godziny.


Ale.... jak dojdzie podwójny zapis przez dziennik, jak sync będzie
robiony co parę kilo danych, jak będzie włączone szyfrowanie/kompresja
dysku, albo jak będzie trzeba odczytać jakieś dane aby zapisać poprawnie następne - to współczuję.


Z baz RAM kiedyś miałem (niewielką) styczność z REDIS i już wtedy
wydawał się dobry, szybki i przyjemny. Teraz, po bardzo pobieżnym 
przejrzeniu dokumentacji, wydaje się że go jeszcze rozbudowali.

Pozdrawiam