小白求助pythonn爬取图片返回空列表

h4k115

用xpath解析数据，爬取文字倒是可以，但是爬一些图片链接就返回空列表，求大神解答！{:1_893:}



源码：

import requests
from lxml import etree
url = 'https://pic.netbian.com/4kmeinv/'            #需要爬取的网站

head = {
"User-Agent" : "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.45 Safari/537.36"
}                                                   #UA伪装
ym = requests.get(url=url,headers=head)#使用requests模块给网站发送GET请求获取网页源
ym.encoding = 'gbk'
s = ym.text
a = etree.HTML(s).xpath('.//body/div[2]/div[3]/ul/li/a/img/a/b/text()')

print(a)

swKingo

不提供源代码和爬取的网页地址，是有点难回答啊。

h4k115

swKingo 发表于 2021-12-2 22:34
不提供源代码和爬取的网页地址，是有点难回答啊。

源码以上传求解答

嘴角微微上扬

在head中把coockies加上试试，还不行就把X-Requested-With这个加上。

kxs2018

肯定是图片地址的表达式没写对
r'.//body/div[2]/div[3]/ul/li/a/img/@src'

cflying

每一个图片页面下的id=“img”里的img不就是地址了么，而且还高清