关于某讯漫画网页爬虫！！！！

z5487693 · 发表于 2019-12-4 17:55

里面用到的是js2py这个模块！！直接找个免费漫画点开一话分析静态页面会发现就一张图片的url!!
对比1.png

而且抓包也抓不到剩下的图片链接！所以怀疑就是通过js来生成的！！接着翻静态页面会发现一个类似base64加密的东西！还有一个nonce

我第一次弄是夏天的时候用断点一步一步翻的还原js！我就不演示了！而且现在也改了还原函数生成方式但是函数名字没变一搜就搜到了！
控制台分析.png

今天我在一搜这个还原函数也改成js生成了！！！不管了直接复制出来！！
核心函数.png

最后用js2py里面的 eval_js()方法参数就是你要执行的js 记得是参数替换后的！！执行后返回一个字符串，用json模块序列化一下就拿到用当前话的所有图片了！
效果展示.png

z5487693 · 发表于 2019-12-5 09:17

wty1641 发表于 2019-12-4 21:51
还是得动态爬，某讯动漫的网页图片是实时加载的，只要加载过就可以直接提取

不同的思路，等加载效率不高

wty1641 · 发表于 2019-12-4 21:51

还是得动态爬，某讯动漫的网页图片是实时加载的，只要加载过就可以直接提取

WSDYDSG · 发表于 2019-12-4 18:02

我是第一

xiaoping02451 · 发表于 2019-12-4 18:22

没看懂不会便宜的

风绕柳絮轻敲雪 · 发表于 2019-12-4 18:33

国漫有啥好看的

xiaocheni · 发表于 2019-12-4 19:28

大佬。。。

Mo大梦 · 发表于 2019-12-4 19:36

表示小白没有看懂

桂花糕乀 · 发表于 2019-12-4 19:44

技术贴，支持一下

Babyfeifei88 · 发表于 2019-12-5 00:40

666谢谢大佬的分享！！！

帐号		自动登录	找回密码
密码			注册[Register]

[Python 转载] 关于某讯漫画网页爬虫！！！！