第一个爬虫程序,多多学习

cxl0825 · 发表于 2018-5-15 19:56

最近PYTHON比较火啊，抽空看了下爬虫相关的知识，就练习了一下，下面是爬到的成果，共同学习。。。。。
环境：python3.6
主要用到的库：requests，re等

爬取目标网站: http://www.mmjpg.com/ 这个网站的妹子质量比较高！！！！

爬去过程：就不多说了。因为是入门级别。直接上如：

放上主程序，新建个工程，需要的类库通过pip install 安装上去。

主程序.rar (1.74 KB, 下载次数: 278)

fanglaogong · 发表于 2018-5-23 23:19

仁者无敌2 发表于 2018-5-15 20:36
刚好也在学习爬虫，这个也能爬，就是不知道怎么将图片分类在不同文件夹，刚好下载参考一下，谢谢分享

同求，小萌新，爬的东西只能手动归类了

cxl0825 · 发表于 2018-5-15 22:09

大屁股的小柯基发表于 2018-5-15 21:16
加油，requests比较好写一些，如果大批量的爬取数据的话，推荐用scrapy框架，方便简洁

恩，把这几个库学好了，就看看框架

liuwenkai1 · 发表于 2018-5-15 20:13

求资源- -

爱你分享 · 发表于 2018-5-15 20:23

楼主可不可以给个教程

一笔 · 发表于 2018-5-15 20:32

楼主等着，我当时候也学爬虫，到时候交流交流

仁者无敌2 · 发表于 2018-5-15 20:36

刚好也在学习爬虫，这个也能爬，就是不知道怎么将图片分类在不同文件夹，刚好下载参考一下，谢谢分享

大屁股的小柯基 · 发表于 2018-5-15 21:16

加油，requests比较好写一些，如果大批量的爬取数据的话，推荐用scrapy框架，方便简洁

夏橙M兮 · 发表于 2018-5-15 21:32

感谢分享。

洪崖洞洞主 · 发表于 2018-5-15 21:36

提示: 作者被禁止或删除内容自动屏蔽

cxl0825 · 发表于 2018-5-15 22:07

爱你分享发表于 2018-5-15 20:23
楼主可不可以给个教程

太简单，我都不好意思说

帐号		自动登录	找回密码
密码			注册[Register]

[Python 转载] 第一个爬虫程序,多多学习

洪崖洞洞主洪崖洞洞主当前离线好友阅读权限 0 听众最后登录 1970-1-1 头像被屏蔽	洪崖洞洞主发表于 2018-5-15 21:36 提示: 作者被禁止或删除内容自动屏蔽

	回复支持举报