slacky.eu

ciao a tutti,
Leggendo il man di wget e gli altri post presenti qui, ho appunto riscontrato che è l'opzione -m quella utile a scaricare tutto un sito....
ho notato però, che il comando wget -m o wget -r usato per scaricare interi siti, non funziona con tutti alla perfezione, ma con alcuni ne scarica solo una parte?
come mai?
Grazie

Mi hai preceduto col post. Stessa identica cosa, anzi a me -r non scarica praticamente nulla.

Da `man wget`:

provato anche quello, ma niente da fare!

Dal libro Slackware Linux Essentials, per scaricare un intero sito: wget creerà una directory col nome del sito contenente il sito stesso.

wget --recursive è come -r, purtroppo anche con quello non mi fa, o meglio sia -r che -m fanno nella maggior parte dei casi, ma con alcuni no.
Grazie x ora comunque...

Bè, io con ho scaricato un sito intero... e a te non va?

mah guarda..., come ripeto, tutte queste opzioni funzionano, ma su alcuni siti no, mi stavo chiedendo se a volte nn fosse colpa del codice html, php o javascript di taluni siti... magati ho detto una bischerata, ma a questo punto nn lo so...
ciao

Aspetta... wget rispetta il robots.txt!! Non è che la colpa è di quello??

Già!! se non sbaglio, il robot.txt, dice cosa fare ai "ragnetti" dei motori di ricerca, tipo seguire i links oppure proseguire su tutte le pagine e poi nn lo so
sai può darsi davvero che sia per quello, magari su questi siti non è presente il robot.txt e il wget si ferma alla index e alle immagini in essa contenute....

Se non fosse presente il robots.txt wget potrebbe scaricare tutto senza problemi.
Prova a vedere se esiste http://sito_che_da_problemi.org/robots.txt

ho controllato, ma il file robots.txt non è presente...