网站 › 『编程语言讨论求助区』 › 求助各位大哥, 一个网站获取不到数据

SuperSpiderMan 发表于 2022-3-30 17:34

求助各位大哥, 一个网站获取不到数据

地址 https://www.chemarc.com/buy
红框里的内容在网页源代码里没有,全局搜索也搜索不到, 这样的数据是怎么产生的?
还请各位大佬不吝赐教! 谢谢了

SuperSpiderMan 发表于 2022-3-30 18:21

limuyan44 发表于 2022-3-30 18:20
不是在里面吗

额 大哥你说的里面指的是哪里? 我查看网页源码没有这些信息.

Takitooru 发表于 2022-3-30 18:23

有啊，怎么没有？
看截图

Flytom 发表于 2022-3-30 18:25

ctrl + F 搜一下就有

秋风君 发表于 2022-3-30 19:13

{:1_929:}确实有的

TomSix 发表于 2022-3-30 21:13

js动态载入了吧，就是说那些代码都是js动态加载的，一般的爬虫是不会触发js，所以你爬虫是爬不到内容的

hxh-linux 发表于 2022-3-31 00:03

实测可以获取，应该是你代码写错了
https://s1.ax1x.com/2022/03/31/qRCTxO.png

SuperSpiderMan 发表于 2022-3-31 08:59

Takitooru 发表于 2022-3-30 18:23
有啊，怎么没有？
看截图

大哥我说错了, 点击See More之后加载的内容获取不到, 抱歉哈

SuperSpiderMan 发表于 2022-3-31 09:00

hxh-linux 发表于 2022-3-31 00:03
实测可以获取，应该是你代码写错了

大哥我说错了, 点击See More之后加载的内容获取不到, 抱歉哈

SuperSpiderMan 发表于 2022-3-31 09:01

TomSix 发表于 2022-3-30 21:13
js动态载入了吧，就是说那些代码都是js动态加载的，一般的爬虫是不会触发js，所以你爬虫是爬不到内容的

是的, 这种怎么处理呢, 如何断点定位呢,大哥能给个思路么

查看完整版本: 求助各位大哥, 一个网站获取不到数据