是非之地 发表于 2019-8-7 17:39

这个python爬虫到底还需要修改哪里

# -*- coding:utf-8 -*-
# 百度搜索图片收集,输入文字 批量下载图片。
import re
import requests


def downloadpic(html, keyword):
    pic_url = re.findall('"objURL":"(.*?)",',html,re.S)
    i = 1
    print('找到关键词:' + keyword + '的图片,现在开始下载图片。。。')
    for each in pic_url:
      print('正在下载第' + str(i) + "张图片,图片地址:" + str(each))
      try:
            pic = requests.get(each, timeout=30)
      except requests.exceptions.ConnectionError:
            print('[错误]当前图片无法下载')
            continue

      dir = 'F:/python_demo/爬虫' + keyword + '_' + str(i) + '.jpg'
      fp = open(dir, 'wb')
      fp.write(pic.content)
      fp.close()
      i += 1


if __name__ == '__main__':
      word = input("Input key word:")
      url = 'https://image.baidu.com/search/index?tn=baiduimage&ipn=r&ct=201326592&cl=2&lm=-1&st=-1&fm=index&fr=&hs=0&xthttps=111111&sf=1&fmq=&pv=&ic=0&nc=1&z=&se=1&showtab=0&fb=0&width=&height=&face=0&istype=2&ie=utf-8&word=' + word
      result = requests.get(url).text
downloadpic(result, word)

井右寺 发表于 2019-8-9 10:59

排版有点乱
不过,一般这种爬虫把网络IO交给线程去处理吧,提高效率。
别的没仔细看。
页: [1]
查看完整版本: 这个python爬虫到底还需要修改哪里