🚀 go-pugleaf

RetroBBS NetNews Server

Inspired by RockSolid Light RIP Retro Guy

Article View: pl.comp.bazy-danych
Article #195777

Re: jak wygląda proces archiwizacji dużej bazy?

#195777
From: Alsor
Date: Thu, 03 Mar 2022 18:57
164 lines
9386 bytes
środa, 2 marca 2022 o 23:07:57 UTC+1 Adam napisał(a):
> Dnia Wed, 2 Mar 2022 13:44:45 -0800 (PST), Alsor napisał(a): 
> 
> > środa, 2 marca 2022 o 19:15:24 UTC+1 Adam napisał(a): 
> >> Dnia Wed, 2 Mar 2022 06:49:13 -0800 (PST), Alsor ZL napisał(a): 
> >> 
> >>> środa, 2 marca 2022 o 10:56:36 UTC+1 Adam napisał(a): 
> >>>> Dnia Tue, 1 Mar 2022 14:39:07 -0800 (PST), Alsor ZL napisał(a): 
> >>>> 
> >>>>> wtorek, 1 marca 2022 o 22:21:57 UTC+1 Adam napisał(a): 
> >>>>>> Dnia Tue, 1 Mar 2022 10:38:12 +0100, geos napisał(a): 
> >>>>>> 
> >>>>>>> On 01.03.2022 03:38, Alsor ZL wrote: 
> >>>>>>>> niedziela, 27 lutego 2022 o 20:17:27 UTC+1 geos napisał(a): 
> >>>>>>>>> On 27.02.2022 15:52, Alsor ZL wrote: 
> >>>>>>>>>> A jaki ma rozmiar ta baza? 
> >>>>>>>>> ok. 21TB 
> >>>>>>>>> 
> >>>>>>>>> pozdrawiam 
> >>>>>>>>> geos 
> >>>>>>>> 
> >>>>>>>> chyba pomyliłeś literki: 21GB. 
> >>>>>>>> 
> >>>>>>>> dla 21TB nie skopiowałbyś tego na żadnym sprzęcie w rozsądny, czasie. 
> >>>>>>>> zresztą nie macie takich dysków... aby to pomieścić. 
> >>>>>>>> 
> >>>>>>>> szybkość waszych kopiarek: 
> >>>>>>>> 21/360 x 100 = 6 MB/s 
> >>>>>>>> i tak nieźle... jak na pendrive z 1 generacji. :) 
> >>>>>>>> 
> >>>>>>>> Luuuuuuuuuuudie. wy nie macie pojęcia w jakim świecie żyjecie: 
> >>>>>>>> G, T, a może masz Peta w mordzie, co? 
> >>>>>>> 
> >>>>>>> nie pomyliłem jednostek. 
> >>>>>>> 
> >>>>>>> daruj sobie takie dalsze teksty. to nie ta grupa. nie ruszają mnie, to 
> >>>>>>> raz, a dwa to raczej ty nie masz pojęcia zielonego o tej bazie i w jakim 
> >>>>>>> świecie żyję. 
> >>>>>>> 
> >>>>>> U mnie w firmie podobne wielkości mają niektóre z maszyn wirtualnych. 
> >>>>>> Jakoś się kopiują i miejsca na backupy w innej lokalizacji starcza. 
> >>>>>> 
> >>>>>> Serwery to nie tylko jakaś jedna maszyna, teraz to może być szafa z kilkoma 
> >>>>>> jednostkami bezdyskowymi i z macierzami SAN. 
> >>>>>> 
> >>>>>> -- 
> >>>>>> Pozdrawiam. 
> >>>>>> 
> >>>>>> Adam 
> >>>>> 
> >>>>> z pewnością... 
> >>>>> tylko skąd tyle tych danych weźmiesz? 
> >>>>> aha... z biblioteki publiczne - z UJ? 
> >>>>> 
> >>>>> 1 książka = 1MB 
> >>>>> zapisz sobie milion książek a otrzymasz... raptem 1TB,! 
> >>>>> 
> >>>>> Luuuuuuuudzie, o czym wy gadacie! 
> >>>> O czym Ty gadasz? 
> >>>> Jedno fotka to czasem kilka MB. 
> >>>> Fotek kilkadziesiąt na jednej stronie, stron kilkaset na jednej witrynie. 
> >>>> A na hostingu siedzi kilkadziesiąt takich witryn. 
> >>>> A są np. jeszcze witryny techniczne, gdzie jest sporo materiałów video, są 
> >>>> dość opasłe instrukcje w PDF. Owszem, te instrukcje są tworzone przez ludzi 
> >>>> nie mających wiedzy poligraficznej, umiejętności ani narzędzi, więc często 
> >>>> zajmują kolejne dziesiątki MB. 
> >>>> Do tego bazy firmowe, gdzie normą w tej chwili jest przerzucanie dokumentów 
> >>>> przez OCR, celem automatycznego przetwarzania np. do rejestrów zakupu albo 
> >>>> do FZ. A jeśli jest to biuro rachunkowe mające ok. 300 klientów, a dla 
> >>>> większości z tych klientów dziennie przetwarza się po kilkadziesiąt czy 
> >>>> kilkaset faktur, to dziennie mogą przybywać duże gigabajty. 
> >>>> Same serwery pocztowe zajmują wiele TB. 
> >>>> Są skrzynki obsługiwane przez IMAP, gdzie jedno konto potrafi zajmować ko 
> >>>> pilkaset GB, a mieć alokację jeszcze większą. 
> >>>> 
> >>>> Minęły już czasy prostych relacyjnych baz danych w dBase, gdzie liczył się 
> >>>> każdy bajt w polu. 
> >>>> Serwery teraz to nie tylko prosty program w Clipperze. 
> >>>> 
> >>>> -- 
> >>>> Pozdrawiam. 
> >>>> 
> >>>> Adam 
> >>> 
> >>> wiem że robicie to na 'wariata' - obrazki zamiast to przetworzyć na tekst, kontury, itd. 
> >>> 
> >> Jeżeli masz na myśli OCR faktur, to chyba nie wiesz, o czym rozmawiasz. 
> >> Owszem, nie ma potrzeby już od roku 2014 podpisywać faktur, nie ma 
> >> pieczątek. Ale są inne przepisy, nie tylko w ustawie o rachunkowości, ale 
> >> też i w kodeksie cywilnym. 
> >> Nie każda firma korzysta z ECOD/EDI, gdzie już od wielu lat niczego się nie 
> >> drukuje, a cała wymiana różnych dokumentów jest wyłącznie eketroniczna. Są 
> >> więc jeszcze w tym roku faktury papierowe, choćby na stacjach paliw. 
> >> Stertę tych faktur wrzuca się do podajnika skanera, skaner to wysyła do 
> >> systemu OCR i owszem, faktura jest czytana przez dość inteligentny system, 
> >> mający całą masę algorytmów, aby na różnych fakturach różnie drukowanych 
> >> znaleźć m.in. datę dostawy/wykonania usługi, datę sprzedaży (albo tylko 
> >> miesiąc dla usług ciągłych), odróżnić nabywcę od odbiorcy, wyłuskać, czy 
> >> faktura jest od netto czy brutto, odróżnić kod EAN od kodu produktu, 
> >> odróżnić VAT od rabatu, odróżnić nazwę towaru od jego cech zwłaszcza przy 
> >> pozycjach wielolinijkowych itd itp. 
> >> Ale też ze względu na inne przepisy niż rozporządzenie w sprawie faktur, 
> >> należy przechowywać albo fakturę papierową albo jej obraz, nie 
> >> zmodyfikowany i nie zmieniony. 
> >> Ponadto obraz ten jest przydatny do weryfikacji rej. vat w księgowości, gdy 
> >> algorytm OCR zgłosi nieprawidłowość, albo faktura jest "bardziej" 
> >> księgowana, np. przez krąg kosztów. 
> >> 
> >> -- 
> >> Pozdrawiam. 
> >> 
> >> Adam 
> > 
> > Bzdury opowiadasz. 
> > 
> > pamiętam starego kumpla... sprzed 25 lat ! 
> > 
> > On mówił wtedy tak (ignorant z informatyki!): 
> > 
> > - po co mi te faktury drukują! 
> > - niech mi to prześlą prosto do mojej bazy - programu księgowego, itd. 
> > 
> > śmiałem się wtedy z jego pomysłów, bo wiedziałem że to nie ta... epoka. 
> > 
> > no ale miał rację, niestety... 
> > 
> > a ta epoka już dawno nastała! 
> > 
> > Teraz już możesz wysyłać... dokładnie jak on to mówił. 
> > 
> > Ale wy tego nadal nie robicie... 
> > dlaczego? 
> > bo jesteście zacofani - żyjecie ciągle w czasach 1990r. 
> > 
> > Powodzenia w przeszłości.
> Ale masz coś konstruktywnego do powiedzenia? 
> 
> Pierwsze transmisje na modemach 2400 i 9600 ustawiałem w sklepach 
> samochodowych gdzieś na przełomie lat 80/90-tych. Było to połączenie do FSO 
> albo FSM. Już wtedy były transmitowane dokumenty, głównie zamówienia. 
> 
> Standard EDI/ECOD ma już sporo ponad 20 lat, jest jednolity w wielu krajach 
> Europy. 
> W roku bieżącym fakultatywnie są e-faktury, od roku 2023 mają być 
> obligatoryjnie. 
> 
> Natomiast niektóre banki czy sądy do tej pory nie uznają maili. 
> Ja pierwszego maila miałem gdzieś końcem lat 80-tych, bodajże w sieci fido. 
> Wtedy mało kto jeszcze słyszał o BBS-ach, internet zaczął wchodzić kilka 
> lat później. 
> 
> Nie wiem, o co Ci chodzi, ale widzę, że dyskusja z Tobą to chyba marnowanie 
> czasu. 

Generalnie pewnie masz rację.

jestem zbyt dobry, za stary, za bardzo obcykany...
aby pytać o cokolwiek z tej dziedziny - sam wiem z góry, lub zgadnę lepiej...

niemniej trzeba jakoś edukować młodzież... z branży IT,
bo to co uprawiacie to ... dziecinada. :)

A nawet prozaiczna... Rozrywka
polegająca na 'dyskusji' z amatorami - naiwnymi userami systemów komp.!, też ma swoją... wartość.
Technical Details
Message-ID: <4483572e-2157-464f-8f95-5605b9569558n@googlegroups.com>
Path: mbox-mo1.pugleaf.net!news-archive.icm.edu.pl!news.icm.edu.pl!newsfeed.pionier.net.pl!3.eu.feeder.erje.net!3.us.feeder.erje.net!feeder.erje.net!border1.nntp.dca1.giganews.com!nntp.giganews.com!news-out.google.com!nntp.google.com!postnews.google.com!google-groups.googlegroups.com!not-for-mail
References: <451a0576-8e64-4ccb-bb59-02a69a421cden@googlegroups.com> <6216b5db$0$469$65785112@news.neostrada.pl> <dc1dfbb5-e76a-46f2-accb-bea8ef975c93n@googlegroups.com> <621bce45$0$6657$65785112@news.neostrada.pl> <8d28ce7e-0418-4e68-9e4c-fd0393cfcc99n@googlegroups.com> <621de985$0$486$65785112@news.neostrada.pl> <1v2k724ea49xo.igj70vfmk0v2$.dlg@40tude.net> <8cf436a9-a914-4a25-847c-079ecd86d10en@googlegroups.com> <1j4h5hcg5hod3.n6jdqpht5o93.dlg@40tude.net> <034755ba-7559-4293-b7e3-7392377a12fen@googlegroups.com> <1lwjekt7u91ac$.d9ctgkwzd72q$.dlg@40tude.net> <e778faeb-b11b-4a5f-b414-1bd7b46abd92n@googlegroups.com> <1or4kgp5sbass.yyf4515olrki$.dlg@40tude.net>

Show Full Headers
Complete Article Headers
X-Received: by 2002:a05:6214:da6:b0:435:4114:2ad9 with SMTP id h6-20020a0562140da600b0043541142ad9mr1867323qvh.22.1646333856567;        Thu, 03 Mar 2022 10:57:36 -0800 (PST)
X-Received: by 2002:a0d:fa81:0:b0:2d6:faee:cbc4 with SMTP id k123-20020a0dfa81000000b002d6faeecbc4mr36880969ywf.388.1646333855307; Thu, 03 Mar 2022 10:57:35 -0800 (PST)
Path: mbox-mo1.pugleaf.net!news-archive.icm.edu.pl!news.icm.edu.pl!newsfeed.pionier.net.pl!3.eu.feeder.erje.net!3.us.feeder.erje.net!feeder.erje.net!border1.nntp.dca1.giganews.com!nntp.giganews.com!news-out.google.com!nntp.google.com!postnews.google.com!google-groups.googlegroups.com!not-for-mail
Newsgroups: pl.comp.bazy-danych
Date: Thu, 3 Mar 2022 10:57:35 -0800 (PST)
In-Reply-To: <1or4kgp5sbass.yyf4515olrki$.dlg@40tude.net>
Injection-Info: google-groups.googlegroups.com; posting-host=37.47.151.108; posting-account=95yuogoAAAAP-TLJzdSixlAUgSgBfFyz
NNTP-Posting-Host: 37.47.151.108
References: <451a0576-8e64-4ccb-bb59-02a69a421cden@googlegroups.com> <6216b5db$0$469$65785112@news.neostrada.pl> <dc1dfbb5-e76a-46f2-accb-bea8ef975c93n@googlegroups.com> <621bce45$0$6657$65785112@news.neostrada.pl> <8d28ce7e-0418-4e68-9e4c-fd0393cfcc99n@googlegroups.com> <621de985$0$486$65785112@news.neostrada.pl> <1v2k724ea49xo.igj70vfmk0v2$.dlg@40tude.net> <8cf436a9-a914-4a25-847c-079ecd86d10en@googlegroups.com> <1j4h5hcg5hod3.n6jdqpht5o93.dlg@40tude.net> <034755ba-7559-4293-b7e3-7392377a12fen@googlegroups.com> <1lwjekt7u91ac$.d9ctgkwzd72q$.dlg@40tude.net> <e778faeb-b11b-4a5f-b414-1bd7b46abd92n@googlegroups.com> <1or4kgp5sbass.yyf4515olrki$.dlg@40tude.net>
User-Agent: G2/1.0
MIME-Version: 1.0
Message-ID: <4483572e-2157-464f-8f95-5605b9569558n@googlegroups.com>
Subject: Re: jak wygląda proces archiwizacji
 dużej bazy?
From: Alsor <alsorgzl@gmail.com>
Injection-Date: Thu, 03 Mar 2022 18:57:36 +0000
Lines: 219
Content-Type: text/plain; charset=UTF-8
Content-Transfer-Encoding: 8bit