by TorTukiTu » Wed Apr 04, 2012 6:58 am
Voici le script bash qui te permettra de pomper directement les archives. A priori, yaurait quelques gigas... T'as des trucs géniaux parmi ces bookins, des trucs introuvables ailleurs...
On peut s'organiser, genrs, quelqu'un pompe les 5000 premiers, une personne d'autre les 5000 suivants, etc.
[code:1:67c2740269]
#!/bin/bash
URL='http://www.bookf.net/Movie/DownloadBook'
echo "Downloading all ebooks FROM : $URL"
URLTITLE='http://www.bookf.net/Download'
for((i = 1; i <= 100000; i++))
do
URLTITLE2="$URLTITLE/$i"
echo "Fetching title from url : $URLTITLE2"
TITLE="$(curl -s "$URLTITLE2" | grep -o "for \".*\" ebook" | sed -e 's/^.*"\([^"]\+\)".*$/\1/g')"
echo "Downloading $TITLE archive $URL/$i"
URL2="$URL/$i"
wget -c "$URL2"
mv "$i" "$TITLE.zip"
done
[/code:1:67c2740269]
Pour ce qui est du stockage, faudrait mettre en place un repo séparé de hackbbs (hébergé ailleurs), histoire que des problèmes sur l'un n'impactent pas l'autre...
Pour la NDH de cette année, ça risque d'être tendu. Mais pour l'an prochain, c'est sur, je rentre en métropole ! =)
Tortue 974.