python抓取网站的图片并下载到本地的方法
实例如下所示:
#!/usr/bin/python
#-*-coding:UTF-8-*-
importre
importurllib,urllib2;
#通过url获取网页
defgetHtml(url):
#要设置请求头,让服务器知道不是机器人
user_agent='Mozilla/4.0(compatible;MSIE5.5;WindowsNT)'
headers={'User-Agent':user_agent}
request=urllib2.Request(url,headers=headers);
page=urllib2.urlopen(request);
html=page.read()
returnhtml
#通过正则表达式来获取图片地址,并下载到本地
defgetImg(html):
reg=r'src="(.+?\.jpg)"'
imgre=re.compile(reg)
imglist=imgre.findall(html)
x=0
forimgurlinimglist:
printimgurl;
#通过urlretrieve函数把数据下载到本地的D:\\images,所以你需要创建目录
urllib.urlretrieve(imgurl,'D:\\images\\%s.jpg'%x)
x=x+1
html=getHtml("http://www.qiushibaike.com/imgrank/")
getImg(html)
以上这篇python抓取网站的图片并下载到本地的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持毛票票。