🚀 go-pugleaf

RetroBBS NetNews Server

Inspired by RockSolid Light RIP Retro Guy

Article View: pl.internet.pomoc
Article #19454

Re: Archiwa grup dyskusyjnych, Re: Za dwa tygodnie koniec swiata

#19454
From: michu vel rebeliant_husky
Date: Sat, 05 Nov 2022 18:42
84 lines
5482 bytes
W dniu 3.11.2022 o 09:57, rebeliant_husky pisze:
> W dniu 2.11.2022 o 16:53, Andrzej P. Wozniak pisze:
>> Osoba podpisana jako rebeliant_husky <boarderx@interia.pl>
>> w artykule <news:63627915$0$475$65785112@news.neostrada.pl> pisze:
>>
>>> Swoją drogą szkoda, żeby to umarło. Jakiś czas temu zebrałem do kupy 
>>> całe archiwum pl.rec.fantastyka.sf-f w postaci mbox gotowego do 
>>> podpięcia pod program pocztowy. Całe, od początku (jeszcze z 
>>> listserv). Piękny kawałek historii. A jakie debaty! Wystawię linki i 
>>> opis na github. Szukam też jakiegoś mirrora, gdyby miał ktoś niecałe 
>>> 1,6GB
>>> wolne.
>>
>> 1. Serwer archiwum news-archive.icm.edu.pl cały czas działa i są na 
>> nim również obie grupy:
>> - pl.listserv.sf-f (prawie 62 tys. wiadomości);
>> - pl.rec.fantastyka.sf-f (prawie 663 tys. wiadomości).
>>
>> 2. Niecałe dwa lata temu pisałem o archiwum UAT polskich grup na 
>> archive.org. Zacytuję ówczesną wiadomość:
>> news://news-archive.icm.edu.pl/5fcb8f4f$0$553$65785112@news.neostrada.pl
>> /----
>> Archiwa pl.* i alt.pl.* są na archive.org:
>> https://archive.org/details/usenet-uat-pl
>> Można pobierać każdą grupę odzielnie lub torrenta z kompletem 337 grup.
>> Plusem jest to, że archiwa są kompletowane z kilku źródeł, w tym z list
>> dyskusyjnych istniejących przed powstaniem grup. Przy łączeniu usunięto
>> spam. Minusem jest fakt, że to jest jakaś wynalazkowa baza danych, do
>> której czytnik archiwów (tbrowser, tylko 64-bit) jest tu:
>> https://bitbucket.org/wolfpld/usenetarchive/downloads/
>> Tu można zobaczyć, jak to działa:
>> https://bitbucket.org/wolfpld/usenetarchive/src/master/
>> Trzeba przewinąć do readme.md i obrazków.
>> Trochę to zagmatwane, kiedyś mnie zniechęciło do sprawdzania. Brak
>> bezpośredniego dostępu do tekstowych źródeł utrudnia rekonstrukcję wątków
>> z popsutymi referencjami czy kontynuowanych na nowej grupie.
>> \----
>>
>> 3. Cztery miesiące temu Freja wspominiała archiwum UAT, o którym 
>> pisałem wcześniej (p.2), ale znalazła też inne archiwum grup pl na 
>> archive.org. Zacytuję jej wiadomość:
>> news://news-archive.icm.edu.pl/62d11c22$0$548$65785112@news.neostrada.pl
>> /----
>> A tu zbiory z archive.org w formacie mbox, ale one obejmują chyba tylko
>> zakres 2003-2013.
>> https://archive.org/download/usenet-pl
>> \----
>>
>> I na tę wiadomość wtedy odpowiedziałeś, więc wypadałoby teraz zrobić 
>> rzeczy następujące:
>> 1. Napisać, czy i jak skorzystałeś z udzielonej informacji, czy może 
>> wszystko zrobiłeś od początku po swojemu.
>> 2. Spakować plik mbox (np. 7-zipem) i wrzucić z opisem na archive.org.
>>
>> Crosspost idzie na pl.internet.pomoc
>>
> 
> W następstwie lipcowego wątku i przypływu nostalgii zebrałem do kupy te 
> archiwa, skontaktowałem się z wolfpld, żeby "zdekodować" archiwum, 
> przygotowałem worfkflow, żeby każdy mógł to "zdekodować", napisałem 
> skrypt w python, który poprawia daty i dzięki temu porządkuje wątki. 
> Finalnie, zrobiłem dwa mbox z listserv (~86 tys. wiadomości) i sf-f 
> (~663. tys wiadomości). Od tego czasu czerpię na chroniczny brak czasu, 
> żeby dokończyć opis i to po prostu wrzucić. Motywowany twoim wpisem i 
> rychłym (oby odwołanym) "końcem świata" zrobię to na dniach. Słowo 
> fantasty.
> 
> Stand by.
> 

Ok, robota skończona.
Opis znajdziecie tu: https://github.com/michuhu/pl.sf-f
Jest tam link do ZIPa na archive.org. Podtrzymuję prośbę o udostępnienie 
mirrora tych mboxów, jeśli ktoś może i ma miejsce.

Pozwolicie, że założę oddzielny temat z tym archiwum. Chodzi o to, żeby 
łatwo w przyszłości było znaleźć temat przeszukując grupę.

Oczywiście, czekam na wszelkie poprawki / komentarze etc.


-- 
---
michu vel rebeliant_husky
Technical Details
Message-ID: <6366aea7$0$556$65785112@news.neostrada.pl>
Path: mbox-mo1.pugleaf.net!news-archive.icm.edu.pl!news.icm.edu.pl!newsfeed.pionier.net.pl!3.eu.feeder.erje.net!3.us.feeder.erje.net!feeder.erje.net!news.quux.org!weretis.net!feeder6.news.weretis.net!usenet.blueworldhosting.com!feed1.usenet.blueworldhosting.com!peer02.iad!feed-me.highwinds-media.com!peer01.ams4!peer.am4.highwinds-media.com!news.highwinds-media.com!newsfeed.neostrada.pl!unt-exc-01.news.neostrada.pl!unt-spo-a-01.news.neostrada.pl!news.neostrada.pl.POSTED!not-for-mail
References: <635c13ab$0$458$65785112@news.neostrada.pl> <635c1e19$0$449$65785112@news.neostrada.pl> <635c2670$0$547$65785112@news.neostrada.pl> <635cf427$0$548$65785112@news.neostrada.pl> <63627915$0$475$65785112@news.neostrada.pl> <6362928c$0$554$65785112@news.neostrada.pl> <6363828b$0$563$65785112@news.neostrada.pl>

Show Full Headers
Complete Article Headers
Path: mbox-mo1.pugleaf.net!news-archive.icm.edu.pl!news.icm.edu.pl!newsfeed.pionier.net.pl!3.eu.feeder.erje.net!3.us.feeder.erje.net!feeder.erje.net!news.quux.org!weretis.net!feeder6.news.weretis.net!usenet.blueworldhosting.com!feed1.usenet.blueworldhosting.com!peer02.iad!feed-me.highwinds-media.com!peer01.ams4!peer.am4.highwinds-media.com!news.highwinds-media.com!newsfeed.neostrada.pl!unt-exc-01.news.neostrada.pl!unt-spo-a-01.news.neostrada.pl!news.neostrada.pl.POSTED!not-for-mail
Date: Sat, 5 Nov 2022 19:42:46 +0100
MIME-Version: 1.0
User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10.15; rv:102.0) Gecko/20100101 Thunderbird/102.4.1
Subject: Re: Archiwa grup dyskusyjnych, Re: Za dwa tygodnie koniec swiata
Newsgroups: pl.rec.fantastyka.sf-f,pl.internet.pomoc
References: <635c13ab$0$458$65785112@news.neostrada.pl> <635c1e19$0$449$65785112@news.neostrada.pl> <635c2670$0$547$65785112@news.neostrada.pl> <635cf427$0$548$65785112@news.neostrada.pl> <63627915$0$475$65785112@news.neostrada.pl> <6362928c$0$554$65785112@news.neostrada.pl> <6363828b$0$563$65785112@news.neostrada.pl>
From: michu vel rebeliant_husky <michu@michu.hu>
In-Reply-To: <6363828b$0$563$65785112@news.neostrada.pl>
Lines: 85
Message-ID: <6366aea7$0$556$65785112@news.neostrada.pl>
Organization: Telekomunikacja Polska
NNTP-Posting-Host: 185.179.132.205
X-Trace: 1667673767 unt-rea-b-01.news.neostrada.pl 556 185.179.132.205:59528
X-Complaints-To: abuse@news.neostrada.pl
X-Received-Bytes: 5264
Content-Type: text/plain; charset=UTF-8
Content-Transfer-Encoding: 8bit