好友
阅读权限10
听众
最后登录1970-1-1
|
清风小学生
发表于 2020-7-26 10:53
想爬取https://happi123.com/这个网站的简谱，程序写到写着写着不知道怎么写了
import requests
import parsel
import re
url = 'https://happi123.com/'
headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.116 Safari/537.36'}
response = requests.get(url = url,headers = headers)
hrml_data = response.text
#print(hrml_data)
prox={'HTTP': '117.88.5.118:3000'}
response=requests.get(url,headers=headers,proxies=prox)
response.encoding=response.apparent_encoding
html=response.text
#print(html)
parse=parsel.Selector(html)#转换后的数据类型。返回Selector对象
#3.2数据提取
href_list=parse.xpath('//*[@id="hot-ul"]/li/a').extract()
#print(href_list)
|
|
发帖前要善用【论坛搜索】功能，那里可能会有你要找的答案或者已经有人发布过相同内容了，请勿重复发帖。 |
|
|
|
|
|
|
|
发表于 2020-7-27 08:21
