sea_fixworld 发表于 2019-11-13 21:04

python-requests爬坑解决方案

因为想爬某墙外视频网站的一些学习用视频。使用了s-s-r,导致python爬墙失败。
忙了一个下午终于找到了最终的解决方案。def main():        proxies={ 'http': 'socks5://127.0.0.1:1080','https': 'socks5://127.0.0.1:1080'        }
可以分别使用python2.8 和python3+来运行代码。附上2个方案的结果图片。
使用python3,要安装pip3: sudo apt-get install pip3
需要安装一下几个包
pip install bs4
pip3 install bs4
pip install requests
pip3 installrequests
pip install pysocks
pip3 install pysocks
pip install lxml
pip3 install lxml

lilips 发表于 2019-11-13 23:10

我是直接将SSR设置成全局~~学习了
页: [1]
查看完整版本: python-requests爬坑解决方案