【python】下载P站（Pixiv）每日排行榜图片
本帖最后由 小莫 于 2021-2-22 15:02 编辑注册好久了，一直在潜水状态，来简单给大家分享一下我之前写的一个下载P站图片的python代码吧；
（python萌新，写的不好还望大佬指点）
使用库：urllib3
代码：
# coding:utf-8
import json
import os
import certifi
import urllib3
class getForPixiv:
def __init__(self):
# 设置爬虫headers
self.headers = {
"user_agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.102 Safari/537.36",
"accept-language": "zh-CN,zh;q=0.9",
"referer": "https://www.pixiv.net/",
}
# 建立连接
self.http = urllib3.PoolManager(
cert_reqs='CERT_REQUIRED',
ca_certs=certifi.where()
)
# 上传文图片到onedrive （如果有装oneindex的话）
def upImgToOnedrive(self):
p = os.popen('php /www/wwwroot/pan/one.php upload:folder /www/wwwroot/python/img \/images/Pixiv').read()
print(p)
# 保存图片
def saveImg(self, imgUrl, id):
(filePath, imgName) = os.path.split(imgUrl)
systemPath = '/www/wwwroot/python/' # 保存路径
dirs = '{systemPath}/img/{id}/'.format(systemPath=systemPath, id=id)
if not os.path.exists(dirs):
os.makedirs(dirs)
path = '{systemPath}/img/{id}/{imgName}'.format(systemPath=systemPath, id=id, imgName=imgName)
r = self.http.request('GET', imgUrl, headers=self.headers)
with open(path, 'wb') as f:
f.write(r.data)
r.release_conn()
print("\033[32m图片{name}已保存到{path}中.\033[0m".format(name=imgName, path=path))
return imgName
# 获取图片列表
def getImgList(self, pid):
# https://www.pixiv.net/ajax/illust/87011701/pages?lang=zh
url = 'https://www.pixiv.net/ajax/illust/{pid}/pages?lang=zh'.format(pid=pid)
r = self.http.request('GET', url, headers=self.headers)
jData = json.loads(r.data.decode('utf-8'))
body = jData['body']
imgList = []
for val in body:
imgList.append({
"original": self.saveImg(val['urls']['original'], pid),
"regular": self.saveImg(val['urls']['regular'], pid),
"small": self.saveImg(val['urls']['small'], pid),
"thumb_mini": self.saveImg(val['urls']['thumb_mini'], pid),
})
return imgList
def Run(self, url):
r = self.http.request('GET', url, headers=self.headers)
jData = json.loads(r.data.decode('utf-8'))
contents = jData['contents']
dataList = []
for val in contents:
dataList.append({
'title': val['title'],
'illust_id': val['illust_id'],
'tags': val['tags'],
'profile_img': val['profile_img'],
'user_name': val['user_name'],
'user_id': val['user_id'],
'imgList': self.getImgList(val['illust_id'])
})
return dataList
调用：
fp = getForPixiv()
# 参数 p=2 为往前1天， p=3 为往前2天，以此类推
# https://www.pixiv.net/ranking.php?mode=daily&content=illust&p=2&format=json
data = fp.Run('https://www.pixiv.net/ranking.php?mode=daily&content=illust&p=1&format=json')
P站图片（不定期更新）：
我为了自己方便，直接将图片从服务器上传到我的onedrive网盘了，在线预览，这样我就不用再下载到电脑上，如果你们感兴趣的话，可以来逛逛；
【onedrive没国内服务器，访问可能有点慢（我的服务器也放在海外）】
https://pan.aoe.top/images/Pixiv/
http://cp.aoe.top/category/imgs
效果：
有软件吗，直接用的。我经常去下载。做成软件。 勾引男人来的标题党，此P站非pornhub，是动漫二次元的P站。 感谢分享！ 要开科学吗 OceanBlue 发表于 2021-2-20 14:15
要开科学吗
需要，不过我是弄了个东京的云服务器挂在上面运行 缩略图吧 哈哈哈开心的点进来，失望的走出去 wenwu.he 发表于 2021-2-20 15:09
勾引男人来的标题党，此P站非pornhub，是动漫二次元的P站。
标题写清楚是“Pixiv”了呀 yhlg 发表于 2021-2-20 14:53
缩略图吧
大、中、小 3种图片全部保存了
页:
[1]
2