这个python爬虫到底还需要修改哪里
# -*- coding:utf-8 -*-# 百度搜索图片收集,输入文字 批量下载图片。
import re
import requests
def downloadpic(html, keyword):
pic_url = re.findall('"objURL":"(.*?)",',html,re.S)
i = 1
print('找到关键词:' + keyword + '的图片,现在开始下载图片。。。')
for each in pic_url:
print('正在下载第' + str(i) + "张图片,图片地址:" + str(each))
try:
pic = requests.get(each, timeout=30)
except requests.exceptions.ConnectionError:
print('[错误]当前图片无法下载')
continue
dir = 'F:/python_demo/爬虫' + keyword + '_' + str(i) + '.jpg'
fp = open(dir, 'wb')
fp.write(pic.content)
fp.close()
i += 1
if __name__ == '__main__':
word = input("Input key word:")
url = 'https://image.baidu.com/search/index?tn=baiduimage&ipn=r&ct=201326592&cl=2&lm=-1&st=-1&fm=index&fr=&hs=0&xthttps=111111&sf=1&fmq=&pv=&ic=0&nc=1&z=&se=1&showtab=0&fb=0&width=&height=&face=0&istype=2&ie=utf-8&word=' + word
result = requests.get(url).text
downloadpic(result, word)
排版有点乱
不过,一般这种爬虫把网络IO交给线程去处理吧,提高效率。
别的没仔细看。
页:
[1]