Python爬虫爬图片须要什么?下面用两种要领制造批量爬取收集图片的要领:
第一种要领:基于urllib完成
要点以下:
1.url_request = request.Request(url)
2.url_response = request.urlopen(url) 或许 url_response = request.urlopen(url_request)
3.data=url_response .read().decode('utf-8')
4.jpglist=re.findall(正则表达式,data)
5.request.urlretrieve(jpgUrl,'%s.jpg' %n) #下载,第一个参数网址,第二参数称号
相干引荐:《Python视频教程》
第一个案例,我们爬取了猫扑上的一个网页上的图片,案例代码以下。
须要申明的是代码request.urlretrieve(each,'pic2\\%s.jpg' %n)中“pic2\\”代表下载的图片安排在提早建好的文件夹pic2里。运转代码完毕以后IDLE和末了效果以下图所示。
第二种完成要领:基于requests完成
要点以下:
1.data=requests.get(url).text
2.jpglist=re.findall(正则表达式,data,re.S)
3.pic=requests.get(pic_url,timeout=10)
4. fp=open(pic_name,'wb')
fp.write(pic.content)
fp.close()
在这个案例中我们爬取了一个壁纸网站的网页,展望应当图片质量比较高吧。完全代码以下:
我们来看一下运转代码的效果,以下图所示。至心不错,我们获得了42张壁纸,而且是在短短几秒钟内完成的。
以上就是Python爬虫爬图片须要什么的细致内容,更多请关注ki4网别的相干文章!