GO语言——基金信息爬虫

kabengqi · 发表于 2020-7-25 14:50

摸鱼了这么久，发一个帖子，嗯，继续摸一下吧（我就是这么耿直）。
之前买了基金一直是去天天基金网看的，我是在支付宝买的基金，所以没有天天基金的账号，每次查询的话都需要开页面，感觉有点麻烦。
然后就自己写了个爬取基金信息的爬虫，很简单，也没设置什么反反爬虫的机制。
使用的话就是直接输入自己的基金编号就可以了。
（请忽略这段话：这个地方是上传了图片的，也不知道有没有显示）
代码是在https://gitee.com/bigkai12138/crawl_tiantianjijin里面，README有说明的
当然也可以直接下载EXE执行文件，当然是用在Windows上的，网盘如下：
链接: https://pan.baidu.com/s/1JQSp8fzrkqLv8zrwhoi_rg 提取码: hjg4

kabengqi · 发表于 2020-7-26 12:55

也没找到编辑的页面在哪，就在这里补充一下吧：
添加了一个代{过}{滤}理池的功能，命令行参数里有个es参数，这个参数存储的是爬取网站时遇到的反爬返回码，比如你爬了一个网站，爬到一半网站返回给你一个204，那么就把204添加到es里面，这样当再次收到204时，就会换一个ip接着爬。你也可以定制自己的处理策略，代码也上传到了码云，注释什么的都有，原理也很简单。

kabengqi · 发表于 2020-9-10 18:54

sghudng 发表于 2020-9-10 17:08
老哥能帮我写一个http://quote.eastmoney.com/changes这页面上的分时异动精灵的小工具吗，之前我发了悬赏没 ...

API是这个

kabengqi · 发表于 2020-7-26 15:28

qtqh112 发表于 2020-7-26 14:59
好像是在看天书

2333，我有这么直男吗？

fengyihui · 发表于 2020-7-26 17:44

就是页面不好看哈，支持

kabengqi · 发表于 2020-7-26 19:54

fengyihui 发表于 2020-7-26 17:44
就是页面不好看哈，支持

主要是自己方便看看，基金都是自己记住的，也可以自己定制，加一下说明字段就好了

lyzskyfly · 发表于 2020-7-26 21:20

好东西，谢谢大佬

wavechen · 发表于 2020-7-27 07:51

好东西，就是页面有点难受

sandcat · 发表于 2020-7-27 10:59

看着有点累

whargekong · 发表于 2020-7-27 12:05

感谢分享

rym82 · 发表于 2020-7-27 12:09

学习了，谢谢分享

帐号		自动登录	找回密码
密码			注册[Register]

[原创工具] GO语言——基金信息爬虫

免费评分