网站 › 『编程语言区』 › 第一个爬虫程序,多多学习

cxl0825 发表于 2018-5-15 19:56

第一个爬虫程序,多多学习

最近PYTHON比较火啊，抽空看了下爬虫相关的知识，就练习了一下，下面是爬到的成果，共同学习。。。。。
环境：python3.6
主要用到的库：requests，re等


爬取目标网站: http://www.mmjpg.com/    这个网站的妹子质量比较高！！！！{:1_905:}

爬去过程：就不多说了。因为是入门级别。直接上如：






放上主程序，新建个工程，需要的类库通过pip install 安装上去。

fanglaogong 发表于 2018-5-23 23:19

仁者无敌2 发表于 2018-5-15 20:36
刚好也在学习爬虫，这个也能爬，就是不知道怎么将图片分类在不同文件夹，刚好下载参考一下，谢谢分享

同求，小萌新，爬的东西只能手动归类了

cxl0825 发表于 2018-5-15 22:09

大屁股的小柯基 发表于 2018-5-15 21:16
加油，requests比较好写一些，如果大批量的爬取数据的话，推荐用scrapy框架，方便简洁

恩，把这几个库学好了，就看看框架

liuwenkai1 发表于 2018-5-15 20:13

求资源- -

爱你分享 发表于 2018-5-15 20:23

楼主可不可以给个教程

一笔 发表于 2018-5-15 20:32

楼主等着，我当时候也学爬虫，到时候交流交流

仁者无敌2 发表于 2018-5-15 20:36

刚好也在学习爬虫，这个也能爬，就是不知道怎么将图片分类在不同文件夹，刚好下载参考一下，谢谢分享

大屁股的小柯基 发表于 2018-5-15 21:16

加油，requests比较好写一些，如果大批量的爬取数据的话，推荐用scrapy框架，方便简洁

夏橙M兮 发表于 2018-5-15 21:32

感谢分享。

洪崖洞洞主 发表于 2018-5-15 21:36

cxl0825 发表于 2018-5-15 22:07

爱你分享 发表于 2018-5-15 20:23
楼主可不可以给个教程

{:1_926:} 太简单，我都不好意思说

查看完整版本: 第一个爬虫程序,多多学习