小白求助pythonn爬取图片返回空列表

h4k115 发表于 2021-12-2 17:37

本帖最后由 h4k115 于 2021-12-3 13:53 编辑

用xpath解析数据，爬取文字倒是可以，但是爬一些图片链接就返回空列表，求大神解答！{:1_893:}

源码：

import requests
from lxml import etree
url = 'https://pic.netbian.com/4kmeinv/'          #需要爬取的网站

head = {
         "User-Agent" : "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.45 Safari/537.36"
}                                                 #UA伪装
ym = requests.get(url=url,headers=head)#使用requests模块给网站发送GET请求获取网页源
ym.encoding = 'gbk'
s = ym.text
a = etree.HTML(s).xpath('.//body/div/div/ul/li/a/img/a/b/text()')

print(a)

swKingo 发表于 2021-12-2 22:34

不提供源代码和爬取的网页地址，是有点难回答啊。

h4k115 发表于 2021-12-3 13:54

swKingo 发表于 2021-12-2 22:34
不提供源代码和爬取的网页地址，是有点难回答啊。

源码以上传求解答

嘴角微微上扬 发表于 2021-12-3 16:50

在head中把coockies加上试试，还不行就把X-Requested-With这个加上。

kxs2018 发表于 2021-12-3 20:33

本帖最后由 kxs2018 于 2021-12-3 20:37 编辑

肯定是图片地址的表达式没写对
r'.//body/div/div/ul/li/a/img/@src'

cflying 发表于 2021-12-4 12:45

每一个图片页面下的id=“img”里的img不就是地址了么，而且还高清

页: [1]

吾爱破解 - 52pojie.cn's Archiver

小白求助pythonn爬取图片返回空列表