shell编写图片抓取器

最近在看《Linux Shell脚本攻略》一书，书中有个图片抓取器的script，抓取出来记录一下。

适用范围：适合抓取html里符合img标签正则规则的图片。

#!/bin/bash
if [ $# -ne 3 ]
then
 echo "Usage: $0 URL -d DIRECTORY"
 exit -1
fi
for i in {1..4}
do
 case $1 in
 -d) shift; directory=$1; shift;;
    *) url=${url:-$1};shift;
esac
done
mkdir -p $directory
baseurl=$(echo $url | egrep -o "https?://[a-z.]+")
echo "$baseurl"
curl -s $url | egrep -o "<img src=[^>]*>" | sed 's/<img src=\"\([^"]*\).*/\1/g'  > /tmp/$$.list
sed -i "s|^/|$baseurl/|" /tmp/$$.list
cd $directory;
while read filename
do
    echo $filename
 curl -s -O "$filename" --silent
done < /tmp/$$.list

运行方式：sh ceshi.sh url -d images (cehi.sh为shell script)