账号密码登录
微信安全登录
微信扫描二维码登录

登录后绑定QQ、微信即可实现信息互通

手机验证码登录
找回密码返回
邮箱找回 手机找回
注册账号返回
其他登录方式
分享
  • 收藏
    X
    scrapy为什么每次执行一条抓取的时候都很慢
    15
    0
    2021-11-17 17:14:27 [scrapy.core.engine] INFO: Spider opened2021-11-17 17:14:27 [scrapy.extensions.logstats] INFO: Crawled 0 pages (at 0 pages/min), scraped 0 items (at 0 items/min)2021-11-17 17:14:27 [scrapy.extensions.telnet] INFO: Telnet console listening on 127.0.0.1:60232021-11-17 17:14:48 [scrapy.core.engine] DEBUG: Crawled (200) <GET https://www.zz.com/az/azgame/page1>; (referer: None)使用python的scrapy框架,每次执行只抓一条数据的时候,信息到这里《INFO: Telnet console》都会卡住,如上信息所示,停顿了有20多秒之后,才会有响应,使用java,php 单独请求的时候,都没有这么慢DOWNLOAD_DELAY 参数都已经设置为0了,还是一样
    0
    打赏
    收藏
    点击回答
        全部回答
    • 0
    更多回答
    扫一扫访问手机版

    回答动态

    aa_92cb0bd09f:发布了悬赏问题9414754预计能赚取 0积分收益
    月亮降落点:发布了悬赏问题9414754预计能赚取 11积分收益
    轻衫萦住:发布了悬赏问题9414754预计能赚取 11积分收益
    若见顾倾心:发布了悬赏问题9414754预计能赚取 11积分收益
    发布了悬赏问题9414754预计能赚取 11积分收益
    aa_69e4d15635:发布了悬赏问题9414754预计能赚取 0积分收益
    北梦木兮:发布了悬赏问题9414754预计能赚取 0积分收益
    潇湘雨夜独听琴:发布了悬赏问题9414754预计能赚取 0积分收益
    醉看山河寂:发布了悬赏问题9414754预计能赚取 0积分收益
    发布了悬赏问题9414754预计能赚取 10积分收益