Pagina 1 di 1

Nuovo mirror by Simplex

Inviato: ven 14 set 2007, 7:47
da Loris
Da alcuni giorni è attivo un nuovo mirror del repository di Slacky (Slackware 12.0) vi chiedo gentilmente di fare un pochino di test e di segnalare qui eventuali malfunzionamenti. Il repository è disponibile anche per Swaret e Slapt-Get.
Ecco i links

Swaret
REPOS_ROOT=Slacky%http://slacky.uglyplace.org/repository/slackware-12.0/

Slapt-Get
http://slacky.uglyplace.org/repository/slackware-12.0/

Colgo l'occasione per ringraziare Simplex, persona disponibile e super gentile :D

Inviato: mar 25 set 2007, 18:57
da Luci0
Ho provato il mirror della repository ed effettivamente ed é veloce ed affidabile ...

Ma per rimanere in tema di mirror di repository ... come si fa crearne uno ... o meglio qual' é il modo migliore ...
Ho tentato l' uso di wget con il limitatore di banda, ma mi sembra una soluzione veramente poco efficiente anche perché, nel protocollo http non esiste un indice e quindi wget si deve controllare tutti i file per capire quale é stato aggiornato. Inoltre si creano tantissimi file fantasma (index.html?C\=D) che aumentano di almeno un fattore 3 le richieste di pagine al server... sarebbe bello avere a disposizione un server rsync o ftp in tal modo la sincronizzazione é molto più semplice per i client ma anche per il server ... che fornisce l' elenco dei file ed il client si regola di conseguenza.
Ho dato un occhiata anche al manuale di httrack sembra un software molto potente ... ma ho letto in giro che non é carino per il trattamento che fa ai siti sui quali viene puntato ... e soprattutto ci vuole educazione nell' uso da parte di chi l' utilizza per non mettere in crisi i server ...
Da quello che ho capito, fa il solito lavoro di wget, ma parallelizzato di un fattore variabile da 8 a 128 ... e quindi peggiora sicuramente la situazione lato server di un fattore 8 /128 in termini di banda e carico di pagine ...

:-)

Inviato: mar 25 set 2007, 19:12
da Bart
Grazie Simplex ;)

Inviato: mar 25 set 2007, 19:34
da simplex
@Lucio: effettivamente ho notato anch'io questa cosa non proprio carina di wget... aumenta il traffico e perde un sacco di tempo per il confronto dei file...
Questa settimana finalmente ho un po' di tempo libero, vedro' di dedicarmi un po' a rsync, a suo tempo l'avevo accennato a Loris ma poi per mancanza di tempo abbiamo ripiegato su wget e sul mirror in http.
Ciao

Inviato: mar 25 set 2007, 20:03
da michelino
Grazie simplex!!!!

Inviato: mar 25 set 2007, 21:28
da Luci0
Per wget ... vedo se c' é qualche sistema per velocizzarlo...

@simplex ...
Che script stai utilizzando e con che frequenza viene effettuata la sincronizzazione ??

Inviato: mer 26 set 2007, 10:44
da simplex
Luci0 ha scritto:Per wget ... vedo se c' é qualche sistema per velocizzarlo...

@simplex ...
Che script stai utilizzando e con che frequenza viene effettuata la sincronizzazione ??

Codice: Seleziona tutto

[uglyplac@box323 ~]$ cat .scripts/sync_slacky 
#!/bin/sh

echo cd ~/public_html/slacky/
cd ~/public_html/slacky/

echo start mirroring
wget -nH -np --mirror -p --html-extension --convert-links \
-R "favicon.ico" \
-o .mirror_slacky.log http://www.slacky.eu/repository/slackware-12.0/ \
 || echo error_slacky

wget -nH -np --mirror -p --html-extension --convert-links \
-o .mirror_gnome.log http://gnome.slacky.eu/repository/gnome-slacky-12.0/ \
 || echo error_gnome_slacky

rm ~/public_html/slacky/robots.txt
echo finish mirroring 

exit
Viene lanciato ogni notte alle 3:00 ora italiana.
Accetto suggerimenti o correzioni da fare ;)

Inviato: sab 1 dic 2007, 11:43
da simplex
News... da qualche giorno è attivo rsync sul mirror di slacky (uglyplace.org).
L'indirizzo è rsync.uglyplace.org, porta 12345 (quando ho sonno ho poca fantasia, si').
Per vedere la lista dei moduli, vi basta dare un

Codice: Seleziona tutto

rsync --list-only --port=12345 rsync://rsync.uglyplace.org/
oppure potete andare su ftp.uglyplace.org, rsync punta li'. Si', quando synco il repository di slacky lo converto in ftp, ma aspettate a gioire, l'ftp c'è ma ha grossi problemi di connettività, causa troppo carico di lavoro sul server :x
NB: rsync accetta al max 4 connessioni contemporanee, non c'è checksum e la banda è quella che è.
Altra cosa, se preferite wgettare da slacky.uglyplace.org, meglio se usare strumenti come lftp, che genera meno traffico ed è più veloce.
Ringraziamo la gentile clientela per aver scelto i nostri prodotti 8)
se avete problemi, suggerimenti o insulti nuovi che non conosco -> simplex@uglyplace.org

Inviato: sab 1 dic 2007, 12:09
da gohanz
Grazie Simplex! ;)

Inviato: sab 1 dic 2007, 16:47
da Paoletta
gohanz ha scritto:Grazie Simplex! ;)
come non quotare? grazie!