- 31
- 0
class EastSpider(scrapy.Spider):
name = 'East'
allowed_domains = ['****.com']
start_urls = ['http://finance.***.com/news.html']
def parse(self, response):
nextUrl = response.xpath('//*[contains(@class,"page-btn")]/@href')
for url in nextUrl.extract():
time.sleep(1)
yield Request(urljoin(response.url,url))
contentUrl = response.xpath('//p[@class="title"]/a/@href')
for urls in contentUrl.extract():
time.sleep(1)
yield Request(urls,callback = self.parse)
pass
代码如上,但是在命令行运行scrapy crawl East -o East.csv的结果,East.csv是个空文件,什么都没写进去。
我看人家说要yield,但是自己搞了搞也没行...
尝试了在for循环之外添加yield url、yield urls报错,说是在定义之前引用了,然后在for循环之内添加又没效果,还是空文件...
0
打赏
收藏
点击回答
网站公告
- 扫一扫访问手机版
回答动态

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器更新之后。服务器里面有部分玩家要重新创建角色是怎么回事啊?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题函数计算不同地域的是不能用内网吧?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题ARMS可以创建多个应用嘛?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题在ARMS如何申请加入公测呀?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题前端小程序接入这个arms具体是如何接入监控的,这个init方法在哪里进行添加?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器刚到期,是不是就不能再导出存档了呢?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器的游戏版本不兼容 尝试更新怎么解决?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器服务器升级以后 就链接不上了,怎么办?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器转移以后服务器进不去了,怎么解决?预计能赚取 0积分收益

- 神奇的四哥:发布了悬赏问题阿里云幻兽帕鲁服务器修改参数后游戏进入不了,是什么情况?预计能赚取 0积分收益
- 回到顶部
- 回到顶部
