吾爱破解 - 52pojie.cn

 找回密码
 注册[Register]

QQ登录

只需一步,快速开始

查看: 1404|回复: 4
收起左侧

[求助] 「Scrapy初学者」有个链接响应为空

[复制链接]
thepoy 发表于 2019-8-1 11:37
刚开始学习这个神奇的工具,用到的第一个链接就遇到了问题。

[Python] 纯文本查看 复制代码
# -*- coding: utf-8 -*-
import scrapy
import re


class StocksSpider(scrapy.Spider):
    name = 'stocks'
    #allowed_domains = ['https://www.aigupiao.com/Quote/stock_market?code=']
    start_urls = ['http://q.10jqka.com.cn/index/index/board/all/field/zdf/order/desc/page/1/ajax/1/']

    def parse(self, response):
        print('------------------这是测试-------------------')
        for i in response.css('tbody td.c-rise::text'):
            print(i.extract())


半天过去才发现是链接的问题:
image.png

请问这个问题应该怎么处理呢?

发帖前要善用论坛搜索功能,那里可能会有你要找的答案或者已经有人发布过相同内容了,请勿重复发帖。

wuyoukm 发表于 2019-8-1 11:48
先测一下 状态码 再测试一下 输出html 再测试xss语句 这是思路,你参照一下
lc11535 发表于 2019-8-1 12:15
 楼主| thepoy 发表于 2019-8-1 13:28
wuyoukm 发表于 2019-8-1 11:48
先测一下 状态码 再测试一下 输出html 再测试xss语句 这是思路,你参照一下

状态码没问题,但是scrapy输出的body跟实际是不同的。
正常如下:
image.png

scrapy得到的response.body如下:
image.png
ufo0033 发表于 2019-8-1 14:33
百度 爬取javascript 渲染的网页
您需要登录后才可以回帖 登录 | 注册[Register]

本版积分规则

返回列表

RSS订阅|小黑屋|处罚记录|联系我们|吾爱破解 - LCG - LSG ( 京ICP备16042023号 | 京公网安备 11010502030087号 )

GMT+8, 2024-11-27 01:16

Powered by Discuz!

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表