网站 › 『编程语言讨论求助区』 › 论坛上的Python爬虫高手们，小的有个问题请教！

冥界3大法王 发表于 2021-5-14 08:00

论坛上的Python爬虫高手们，小的有个问题请教！

本帖最后由 冥界3大法王 于 2021-5-14 09:03 编辑

爬虫需要哪些道具支持？列表越多越详细越好。{:301_974:}
首先感谢下涛之雨哥们的远程表演。。。让我茅塞顿开。。。
“接下来就是找你们要武器装备的时候了”{:301_974:}

我的Python代码生成器二代爬虫部分可以升级了。。。

我心飞翔1995 发表于 2021-5-14 08:04

anaconda或者winpython一个大包就可以解决

去你的吧 发表于 2021-5-14 08:06

冥界3大法王 发表于 2021-5-14 08:12

去你的吧 发表于 2021-5-14 08:06
难道不是一个re走天下 哈哈

到腾讯公开课上回复这个。。。老师无论你说啥他都说是错的。。。

First丶云心 发表于 2021-5-14 08:15

emhui 发表于 2021-5-14 08:18

1. 先学会使用F12分析一下结构，有些爬虫可能可以直接调用API把所有数据获取，这样的话，可以直接在控制台进行操作了。
2. 如果在控制台实现不了获取到所有数据，简单的爬虫可以直接使用requests了。
3. 复杂的爬虫可以使用各类框架了。

冒个泡 发表于 2021-5-14 08:18

先烈？您知道先烈的意思吗？这不是人格侮辱么，反手就是一个举报

emhui 发表于 2021-5-14 08:19

emhui 发表于 2021-5-14 08:18
1. 先学会使用F12分析一下结构，有些爬虫可能可以直接调用API把所有数据获取，这样的话，可以直接在控制台 ...

chrome 浏览器有个应用扩展，叫Web Scraper。原理是模拟点击浏览器进行爬虫的，可以试试，不用写什么代码。

每日一点点 发表于 2021-5-14 08:19

托尼老师Tony 发表于 2021-5-14 08:21

python学得好，牢饭吃到饱

查看完整版本: 论坛上的Python爬虫高手们，小的有个问题请教！