Python爬取动态网页问题

JIMaz · 发表于 2020-5-13 17:12

请教一个关于gs银行黄金实时价格数据的问题，
黄金.jpg

这里能看见数据，但是到网页源码去找就找不到了，请大佬帮忙分析一波请求过程
还有在哪里能找到这个数据，谢谢
附上网址：https://mybank.icbc.com.cn/icbc/newperbank/perbank3/frame/frame_index.jsp?serviceId=PBL200603

子时落尽 · 发表于 2020-5-13 17:17

你直接打开这个https://mybank.icbc.com.cn/icbc/newperbank/perbank3/gold/futuresgold_query_out.jsp

JIMaz · 发表于 2020-5-13 17:43

子时落尽发表于 2020-5-13 17:17
你直接打开这个https://mybank.icbc.com.cn/icbc/newperbank/perbank3/gold/futuresgold_query_out.jsp

谢谢，刚刚请求下来了，对于提取有什么看法没有

放手一搏09 · 发表于 2020-5-13 17:45

楼上的可以，不过楼主也可以构造post请求访问!https://mybank.icbc.com.cn/servlet/AsynGetDataServlet加参数Area_code=0200&GoldIndexTradeMode=1&proIdsIn=130060193592%7C130060193593&isFirstTime=0&step=3&tranCode=A00508。这样也可以的直接解析json

王星星 · 发表于 2020-5-13 17:51

提示: 作者被禁止或删除内容自动屏蔽

JIMaz · 发表于 2020-5-13 17:59

放手一搏09 发表于 2020-5-13 17:45
楼上的可以，不过楼主也可以构造post请求访问!https://mybank.icbc.com.cn/servlet/AsynGetDataServlet加参 ...

请求超时

zdnyp · 发表于 2020-5-13 18:15

抓包，正则，

JIMaz · 发表于 2020-5-13 18:32

zdnyp 发表于 2020-5-13 18:15
抓包，正则，

正则可以的，感谢

放手一搏09 · 发表于 2020-5-13 22:13

不会吧我这边post携带参数访问没问题！

帐号		自动登录	找回密码
密码			注册[Register]

王星星王星星当前离线好友阅读权限 0 听众最后登录 1970-1-1 头像被屏蔽	王星星发表于 2020-5-13 17:51 提示: 作者被禁止或删除内容自动屏蔽
王星星王星星当前离线好友阅读权限 0 听众最后登录 1970-1-1 头像被屏蔽	如何快速判断一个文件是否为病毒！
	回复支持举报

[求助] Python爬取动态网页问题

本帖被以下淘专辑推荐: