网站 › 『编程语言讨论求助区』 › Python爬取动态网页问题

JIMaz 发表于 2020-5-13 17:12

Python爬取动态网页问题

请教一个关于gs银行黄金实时价格数据的问题，

这里能看见数据，但是到网页源码去找就找不到了，请大佬帮忙分析一波请求过程
还有在哪里能找到这个数据，谢谢
附上网址：https://mybank.icbc.com.cn/icbc/newperbank/perbank3/frame/frame_index.jsp?serviceId=PBL200603

子时落尽 发表于 2020-5-13 17:17

你直接打开这个https://mybank.icbc.com.cn/icbc/newperbank/perbank3/gold/futuresgold_query_out.jsp

JIMaz 发表于 2020-5-13 17:43

子时落尽 发表于 2020-5-13 17:17
你直接打开这个https://mybank.icbc.com.cn/icbc/newperbank/perbank3/gold/futuresgold_query_out.jsp

谢谢，刚刚请求下来了，对于提取有什么看法没有{:301_1001:}

放手一搏09 发表于 2020-5-13 17:45

楼上的可以，不过楼主也可以构造post请求访问!https://mybank.icbc.com.cn/servlet/AsynGetDataServlet加参数Area_code=0200&GoldIndexTradeMode=1&proIdsIn=130060193592%7C130060193593&isFirstTime=0&step=3&tranCode=A00508。这样也可以的直接解析json

王星星 发表于 2020-5-13 17:51

JIMaz 发表于 2020-5-13 17:59

放手一搏09 发表于 2020-5-13 17:45
楼上的可以，不过楼主也可以构造post请求访问!https://mybank.icbc.com.cn/servlet/AsynGetDataServlet加参 ...

请求超时

zdnyp 发表于 2020-5-13 18:15

抓包，正则，

JIMaz 发表于 2020-5-13 18:32

zdnyp 发表于 2020-5-13 18:15
抓包，正则，

正则可以的，感谢

放手一搏09 发表于 2020-5-13 22:13

不会吧 我这边post携带参数访问没问题！

查看完整版本: Python爬取动态网页问题