网站 › 『编程语言区』 › java爬虫 宽度优先抓取网页内容

yutian1993 发表于 2014-11-13 09:22

java爬虫 宽度优先抓取网页内容

   一个用Java写的简易爬虫，可以抓取用户自定义页面中链接的对应页面。抓取到的文件可以存放在用户自定义的目录下。
文件稍稍超出了1MB，出于运行考虑，就没有去掉jar包。所以就用网盘分享吧。
http://yunpan.cn/cAJAtgvWcYAwH （提取码：edb0）

第一行代码 发表于 2016-10-8 11:09

半年前用Python也写了个爬虫，爬某个网线图片的，但是有时候晚上会有网络繁忙错误状态，不知楼主的会不会出现这样的问题

sh9264 发表于 2014-11-13 09:42

支持楼主{:1_912:}

jackrong 发表于 2014-11-13 09:46

用下来还不错，学习了，谢谢分享。

十一月的红薯 发表于 2014-11-18 18:58

感谢分享，学习一下！

tianlangxing866 发表于 2014-11-18 20:24

下来看看好用不

vmozhang 发表于 2015-10-8 13:48

感谢楼主发布，希望楼主继续优化{:301_997:}

jimoyiyanhua 发表于 2015-10-8 19:40

感谢楼主分享~~

ぁмǐηɡ玥夜 发表于 2015-10-10 13:54

爬虫不是python的专长吗？

763221847 发表于 2015-10-16 23:26

爬虫不是python的专长吗？

strategy 发表于 2015-10-22 10:55

多谢LZ分享

查看完整版本: java爬虫 宽度优先抓取网页内容