ddshttgb 发表于 2021-2-24 16:32

新手练手找一些好看的图片

练手作业,找一些赏心悦目的图片跟大家一起交流,不过图片不是高清的,只是预览图,大哥们有好的方法弄高清的图吗
import requests
from lxml import etree
import os

for i in range(1,40):
    url='http://pic.netbian.com/4kmeinv/index_%d.html'
    new_url=format(url%i)
    headers = {
      'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/88.0.4324.150 Safari/537.36'
    }
    page=requests.get(url=new_url,headers=headers)
    page.encoding=page.apparent_encoding
    page_text=page.text

    tree= etree.HTML(page_text)
    li_list=tree.xpath('//div[@class="slist"]/ul/li')
    if not os.path.exists('./picLibs'):
      os.mkdir('./picLibs')
    for li in li_list:
      img_src='http://pic.netbian.com'+ li.xpath('./a/img/@src')
      img_name=li.xpath('./a/img/@alt')+'.jpg'

      img_data=requests.get(url=img_src,headers=headers).content
      img_path='picLibs/'+img_name
      with open (img_path,'wb')as fp:
            fp.write(img_data)
            print(img_name,"下载完成!")

ddshttgb 发表于 2021-2-24 16:47

By丿安之若素 发表于 2021-2-24 16:42
这个网站需要登录的,你得去爬没有登录的,或者带上参数再爬这个网址,不过估计这个网站也是登陆完还得充值

我没登录啊直接爬的

By丿安之若素 发表于 2021-2-24 16:42

这个网站需要登录的,你得去爬没有登录的,或者带上参数再爬这个网址,不过估计这个网站也是登陆完还得充值

w92vv 发表于 2021-2-24 16:36

有没有更好看的图片

LingAi1979 发表于 2021-2-24 16:39

fucking great

987fw 发表于 2021-2-24 16:47

这个没有图片啊,

ddshttgb 发表于 2021-2-24 16:47

987fw 发表于 2021-2-24 16:47
这个没有图片啊,

不能吧,执行结果看看呢,我这是可以正常运行的

By丿安之若素 发表于 2021-2-24 16:48

ddshttgb 发表于 2021-2-24 16:47
我没登录啊直接爬的

所以你爬的是缩略图啊,高清图需要登录的

rainbow270118 发表于 2021-2-24 17:14

python 爬虫,好久没弄过了,先试试

西北怒偏东 发表于 2021-2-24 17:31

登陆以后可以免费下载打图,代码就不知道怎么搞了
页: [1] 2
查看完整版本: 新手练手找一些好看的图片