🚀 go-pugleaf

>>>>> "W" == W Sylwestrzak@icm edu pl <woj...@icm.edu.pl> writes:

>>  A powiedzcie lepiej, jak te wasze kasze robia odswiezanie tego, co
>> w kaszy siedzi? Bo ze nie porownuja Last-Modified z tym, co jest na
>> oryginalnym serwerze, to juz wiem...

W> Administrator ustawia sobie ttl i rozne wagi. :-) poza tym reload
W> zrobione z klienta tez odswieza.

Kiepawo. Reload z netscape czy czegos tam to po prostu ustawia
'no-cahce' i sie sciaga z oryginalnego servera caly plik, nawet jak ma
100 MB (I know, I know) i wcale sie nie zmienil. W moim pojeciu to
jest jakas straszna proteza, 'reload' w kliencie nie powinno sie nijak
miec do kaszowania...

W> A co to jest Last-Modified ?

Mam nadzieje, ze tylko udajesz, ze nie wiesz. To jest pole w naglowku
HTTP, ___specjalnie po to zrobione___, zeby mozna bylo zrobic kasze w
miare efektywna, a za to zawsze aktualna.
Po prostu, serwer kaszy sprawdza, czy to ma, jest aktualne. Jesli robi
to przy kazdej probie pobrania czegos z kaszy, to troche to kosztuje -
trzeba sie polaczyc z oryginalnym serwerem i sie zapytac. Ale to i tak
jest drobny ulamek kosztow przeslania dokumentu w calosci. Mozliwe sa
tez rozwiazania posrednie - sprawdzac dopiero po jakims czasie od
poprzedniego sprawdzenia. Natomiast kasza w ogole ignorujaca te
rubryke to jest jakies glebokie nieporozumienie.

W>  na przyklad w przypadku pliku sciaganego ftpem ? ;-)

To ftp tez kaszujecie? Jakos przegapilem.
Anyway, tez mozna polaczyc sie z serverem ftp i sprawdzic date u
zrodla... Jest taka komenda 'dir' 8-)
A tak poza tym, to browsery www nadaja sie do sciagania ftp-em jak
piesc do karety. 

   MJ

In article <2n4tud2...@ccmj.fuw.edu.pl>, Michal Jankowski wrote:
>>>>>> "W" == W Sylwestrzak@icm edu pl <woj...@icm.edu.pl> writes:
>
>>>  A powiedzcie lepiej, jak te wasze kasze robia odswiezanie tego, co
>>> w kaszy siedzi? Bo ze nie porownuja Last-Modified z tym, co jest na
>>> oryginalnym serwerze, to juz wiem...
>
>W> Administrator ustawia sobie ttl i rozne wagi. :-) poza tym reload
>W> zrobione z klienta tez odswieza.
>
>Kiepawo. Reload z netscape czy czegos tam to po prostu ustawia
>'no-cahce' i sie sciaga z oryginalnego servera caly plik, nawet jak ma

dodajmy, ze sciaga sie przez cache - nie bezposrednio - to cache interpretuje
odpowiedni naglowek http.

>100 MB (I know, I know) i wcale sie nie zmienil. W moim pojeciu to
>jest jakas straszna proteza, 'reload' w kliencie nie powinno sie nijak
>miec do kaszowania...

a sie ma. Taki netscape wysyla naglowek do cachai on moze na to zareagowac. i
Musi sie to jakos do siebie miec

>
>W> A co to jest Last-Modified ?
>
>Mam nadzieje, ze tylko udajesz, ze nie wiesz. To jest pole w naglowku
>HTTP, ___specjalnie po to zrobione___, zeby mozna bylo zrobic kasze w
>miare efektywna, a za to zawsze aktualna.
>Po prostu, serwer kaszy sprawdza, czy to ma, jest aktualne. Jesli robi
>to przy kazdej probie pobrania czegos z kaszy, to troche to kosztuje -
>trzeba sie polaczyc z oryginalnym serwerem i sie zapytac. Ale to i tak
>jest drobny ulamek kosztow przeslania dokumentu w calosci. Mozliwe sa
>tez rozwiazania posrednie - sprawdzac dopiero po jakims czasie od
>poprzedniego sprawdzenia. Natomiast kasza w ogole ignorujaca te
>rubryke to jest jakies glebokie nieporozumienie.
>

proponuje  "literature" http://harvest.cs.colorado.edu/harvest/papers.html#cache
sa tam odniesienia do ciekawych "papierow" - problem nie jest 
niestety tak prosty jak by sie wydawalo.

>A tak poza tym, to browsery www nadaja sie do sciagania ftp-em jak
>piesc do karety. 
>
ale ludzie tego uzywaja

>   MJ

co do tych "kasz" to proponuje jeszcze 

http://excalibur.usc.edu/
http://www.nlanr.net/Cache/

pozdrawiam 


Jacek
-- 
----------------------------------------------------------------------------

Jacek Tobiasz                                       emai...@ikp.atm.com.pl

----------------------------------------------------------------------------

Michal Jankowski (Michal.J...@fuw.edu.pl) wrote:
: >>>>> "W" == W Sylwestrzak@icm edu pl <woj...@icm.edu.pl> writes:
: 
: W> A co to jest Last-Modified ?
...
: W>  na przyklad w przypadku pliku sciaganego ftpem ? ;-)
: 
: To ftp tez kaszujecie? Jakos przegapilem.
: Anyway, tez mozna polaczyc sie z serverem ftp i sprawdzic date u
: zrodla... Jest taka komenda 'dir' 8-)

W wuarchive ftpd jest tez taka komenda MDTM

Np:

ftp ftp.ict.pwr.wroc.pl
Connected to ftp.ict.pwr.wroc.pl.
220 asic FTP server (Version wu-2.4(6) Mon Apr 18 13:18:52 MET DST 1994) ready.
331 Guest login ok, send your complete e-mail address as password.
...
230 Guest login ok, access restrictions apply.
ftp> quote help
214-The following commands are recognized (* =>'s unimplemented).
   USER    PORT    STOR    MSAM*   RNTO    NLST    MKD     CDUP 
   PASS    PASV    APPE    MRSQ*   ABOR    SITE    XMKD    XCUP 
   ACCT*   TYPE    MLFL*   MRCP*   DELE    SYST    RMD     STOU 
   SMNT*   STRU    MAIL*   ALLO    CWD     STAT    XRMD    SIZE 
   REIN*   MODE    MSND*   REST    XCWD    HELP    PWD     MDTM 
   QUIT    RETR    MSOM*   RNFR    LIST    NOOP    XPWD 
ftp> quote MDTM /README
213 19940406163602
ftp> dir /README
200 PORT command successful.
150 Opening ASCII mode data connection for /bin/ls.
-r--r--r--   1 arch     ftp          4813 Apr  6  1994 /README
226 Transfer complete.

: A tak poza tym, to browsery www nadaja sie do sciagania ftp-em jak
: piesc do karety. 

A to juz zupelnie inna sprawa... :-)

Tomek

-- 
 _________
(_   _' __) Tomasz R. Surmacz *----* Work:(071)202823 tsur...@ict.pwr.wroc.pl
  |  (__  \ http://www.ict.pwr.wroc.pl/~tsurmacz/ Home: t...@papaja.wroc.apk.net
  |__(____/ For PGP key finger tsur...@asic.ict.pwr.wroc.pl *---* irc: TomekS

Michal Jankowski (Michal.J...@fuw.edu.pl) wrote:
: Kiepawo. Reload z netscape czy czegos tam to po prostu ustawia
...

Michal, zelgalem jak pies. fragment z pliku konfiguracyjnego:

#  TAG: ttl_pattern
#       Selection of TTL's based on URL regular expressions (syntax
#       is the POSIX standard).  There are no defaults.
#
#       The list of URL patterns are searched in the order listed here.
#       All patterns in the list are checked and the last match is used.
#       There are two ways to specify the TTL: an absolute value, and
#       as a percentage of the object's age.
#
#       The percentage factor is listed last on the line and may be
#       omitted.   If the value is positive (non-zero) and the object
#       metadata includes a last-modified timestamp, the TTL will be set as
#       the given percent of the difference between current time and
#       the last-modified time.  The number following the percentage
#       is an upper limit on the TTL.  The default is 43200 minutes, or
#       30 days.  This means that no object whose TTL is set by this
#       method will remain in the cache for longer than 30 days.
#
#       If the percentage factor is not used (for example when an object
#       has no last-modified timestamp) the absolute TTL value will
#       be checked instead.  If the absolute value is non-negative,
#       it will be used.
#
#       A negative absolute TTL value in conjunction with a positive
#       percentage factor has the effect that the TTL is set from
#       the pattern match only if a last-modified timestamp is present.
#
#       If neither the absolute TTL or percentage factor result in a
#       TTL for the object, the default TTL from the preceeding section
#       will be used.
#
#       Examples:
#
#                                                     Calculate TTL as
#                                       Absolute      this percentage of
#               Regular Expression      TTL in        the object's age
#               matching URLs           minutes       %age   Max (minutes)

Ja po prostu u siebie dalem bardzo duze wartosci.

--w

Michal Jankowski (Michal.J...@fuw.edu.pl) wrote:
: Kiepawo. Reload z netscape czy czegos tam to po prostu ustawia
: 'no-cahce' i sie sciaga z oryginalnego servera caly plik, nawet jak ma
: 100 MB (I know, I know) i wcale sie nie zmienil. W moim pojeciu to
: jest jakas straszna proteza, 'reload' w kliencie nie powinno sie nijak
: miec do kaszowania...

Chwileczke. Przeciez to jest sytuacja podobna do uzycia lokalnego cache 
netscapowego (bo przeciez nikt nie ustawia w opcjach tego verify 
document). Znaczy sie jakos z tym mozna zyc - wiekszosc tekstow w WWW nie 
zmienia sie tak bardzo czesto. A jak sie zmienia bardzo czesto, to przeciez
mozna w HEAD ustawic Refresh, czy jakos tak.

[...]
: A tak poza tym, to browsery www nadaja sie do sciagania ftp-em jak
: piesc do karety. 

Ale jak plik ftp'owy jest w kaszy, to moze jednak warto bedzie uzyc
netscape... 

-- 
Jaroslaw Strzalkowski, Uczelniane Centrum Informatyki AGH, Krakow

>>>>> "Jaroslaw" == Jaroslaw Strzalkowski <j...@uci.agh.edu.pl> writes:

Jaroslaw> Chwileczke. Przeciez to jest sytuacja podobna do uzycia
Jaroslaw> lokalnego cache netscapowego (bo przeciez nikt nie ustawia w
Jaroslaw> opcjach tego verify document). 

Disk cache, tak jak jest zrobiony w netscape, to jest dopiero jakies
wielkie nieporozumienie...

>> A tak poza tym, to browsery www nadaja sie do sciagania ftp-em jak
>> piesc do karety.

Jaroslaw> Ale jak plik ftp'owy jest w kaszy, to moze jednak warto
Jaroslaw> bedzie uzyc netscape...

Ta? A umiesz netscape'owi powiedziec, zeby sciagnal np. wszystkie
pliki z katalogu? Albo katalog z podkatalogami? Albo wszystkie pliki
na pe? 

A przy tym wydaje mi sie, ze znakomita wiekszosc sensownych rzeczy
dostepnych przez ftp to sa archiwa typu sunsite czy simtel - a te i
tak sa mirrorowane w Polsce. Jakos wydaje mi sie, ze sensowniej jest
sciagac ftp z sunsite.icm.edu.pl niz z sunsite.sun.com przez HTTP
cache w icm.edu.pl.

A jesli to ma byc ftp-niecie czegos egzotycznego, to tego i tak nie
bedzie w cache...

  MJ

PS. Wlasnie wykrylem, ze dyskutujemy w zlej grupie. Przenosze do
pl.comp.www.

Michal Jankowski (Michal.J...@fuw.edu.pl) wrote:
: A przy tym wydaje mi sie, ze znakomita wiekszosc sensownych rzeczy
: dostepnych przez ftp to sa archiwa typu sunsite czy simtel - a te i
: tak sa mirrorowane w Polsce. Jakos wydaje mi sie, ze sensowniej jest
: sciagac ftp z sunsite.icm.edu.pl niz z sunsite.sun.com przez HTTP
: cache w icm.edu.pl.
: A jesli to ma byc ftp-niecie czegos egzotycznego, to tego i tak nie
: bedzie w cache...

Cache jest uzyteczny przede wszystkim w sytuacjach takich jak to sie 
niedawno zalil Jack Tuszynski - gdy oglasza sie cos atrakcyjnego i nagle 
tysiace ludzi z kazdego miasta sciaga to samo. Dla egzotycznych downloadow
cache oczywiscie tylko wprowadza narzut - ale niewielki (no chyba ze cache
server bylby daleko, ale po to tworzymy rozproszona siec serwerow cache, 
zeby wszedzie w Polsce byly bliskie serwery - np. w obrebie MAN'u).

PS: Przepraszam, ale czy Ty moze chcesz przekonywac ze cache jest 
    niepotrzebny? Dziwny pomysl.

-- 
Jaroslaw Strzalkowski, Uczelniane Centrum Informatyki AGH, Krakow

Michal Jankowski (Michal.J...@fuw.edu.pl) wrote:
: >>>>> "Jaroslaw" == Jaroslaw Strzalkowski <j...@uci.agh.edu.pl> writes:

: Jaroslaw> Chwileczke. Przeciez to jest sytuacja podobna do uzycia
: Jaroslaw> lokalnego cache netscapowego (bo przeciez nikt nie ustawia w
: Jaroslaw> opcjach tego verify document). 

: Disk cache, tak jak jest zrobiony w netscape, to jest dopiero jakies
: wielkie nieporozumienie...

: >> A tak poza tym, to browsery www nadaja sie do sciagania ftp-em jak
: >> piesc do karety.

: Jaroslaw> Ale jak plik ftp'owy jest w kaszy, to moze jednak warto
: Jaroslaw> bedzie uzyc netscape...

: Ta? A umiesz netscape'owi powiedziec, zeby sciagnal np. wszystkie
: pliki z katalogu? Albo katalog z podkatalogami? Albo wszystkie pliki
: na pe? 

No to zrobcie u siebie Alexa i wtedy:

cp -R /alex/se/sunet/ftp/pub/* ~ #:-))

lub:
cp [...]/p* ~/archiwum

albo:

tar xfvz [...]/pub/gnu/gcc*.tar.gz


cacheowane, latwo i wygodnie. Wysilek wlozony w kompilacje i instalacje -
dolny poziom stanow srednich. Korzystanie - lekko latwo i przyjemnie. Mozna
korzystac z linkow symbolicznych.
Dzialajace porty (sam przetrenowalem): SunOS 4.x i Linux. port na Solaris
2.x - still under construction, ale mozna probowac puscic wersje binarna
pod BCP. Wymagania sprzetowe - PC 486/Linux, 16MB RAM, kilkaset MB na
cache,  Sun SS?*, RAM i HDD tej samej wielkosci. Warunek - nie mozna
korzystac z NFS (ale mozna wykorzystac SMB - tak jak u nas).

--
           Maciej Kozinski         http://www.boa.uni.torun.pl/~maciek