記得去年找工作面試時(shí),聽(tīng)到一位同學(xué)說(shuō)自己非常喜歡linux,我相信他說(shuō)的是真的,我覺(jué)得喜歡linux的人很大的快樂(lè)來(lái)自shell腳本,因?yàn)樗軌蛘蟣inux上的各種資源干大事。下面和大家分享下一個(gè)shell腳本寫(xiě)的圖片抓取器。
使用方法:
復(fù)制以下代碼,命名為img_downloader.sh。使用時(shí)在shell下輸入 ./img_downloader.sh www.baidu.com -d images,該shell腳本就會(huì)把百度首頁(yè)上的圖片下下來(lái)了。
#!/bin/bash
if [ $# -ne 3 ];
then
echo "Usage: $0 URL -d DIRECTORY"
exit -1
fi
for i in {1..4}
do
case $1 in
-d) shift; directory=$1; shift;;
*) url=${url:-$1};shift;
esac
done
mkdir -p $directory
baseurl=$(echo $url | egrep -o "https?://[a-z.]+")
echo "$baseurl"
curl -s $url | egrep -o "img src=[^>]*>" |
sed 's/img src=\"\([^"]*\).*/\1/g' > /tmp/$$.list
sed -i "s|^/|$baseurl/|" /tmp/$$.list
cd $directory;
while read filename
do
curl -s -O "$filename" --silent
done /tmp/$$.list