java爬虫宽度优先抓取网页内容

yutian1993 · 发表于 2014-11-13 09:22

一个用Java写的简易爬虫，可以抓取用户自定义页面中链接的对应页面。抓取到的文件可以存放在用户自定义的目录下。
文件稍稍超出了1MB，出于运行考虑，就没有去掉jar包。所以就用网盘分享吧。
http://yunpan.cn/cAJAtgvWcYAwH （提取码：edb0）

第一行代码 · 发表于 2016-10-8 11:09

半年前用Python也写了个爬虫，爬某个网线图片的，但是有时候晚上会有网络繁忙错误状态，不知楼主的会不会出现这样的问题

sh9264 · 发表于 2014-11-13 09:42

支持楼主{:1_912:}

jackrong · 发表于 2014-11-13 09:46

用下来还不错，学习了，谢谢分享。

十一月的红薯 · 发表于 2014-11-18 18:58

感谢分享，学习一下！

tianlangxing866 · 发表于 2014-11-18 20:24

下来看看好用不

vmozhang · 发表于 2015-10-8 13:48

感谢楼主发布，希望楼主继续优化

jimoyiyanhua · 发表于 2015-10-8 19:40

感谢楼主分享~~

ぁмǐηɡ玥夜 · 发表于 2015-10-10 13:54

爬虫不是python的专长吗？

763221847 · 发表于 2015-10-16 23:26

爬虫不是python的专长吗？

strategy · 发表于 2015-10-22 10:55

多谢LZ分享

帐号		自动登录	找回密码
密码			注册[Register]

[Java 转载] java爬虫宽度优先抓取网页内容