-
暮雪流年2020-01-01 00:00
- 62
- 0
def parse_item(self,response):
item = pencilnewsItem()
title_list=response.xpath('//div[@class=“article_content”]/h3/a/text()').extract()
link_list=response.xpath('//div[@class=“article_content”]/h3/a/@href').extract()
for link in link_list:
item['link']=link
yield scrapy.request(url=link,callback=self.parse_time_url(),dont_filter=True,meta=item)
def parse_time_url(self,response):
item=response.meta['item']
item['time']=response.xpath('//div[@class= “article_create_time”]/span/text()').extract()
yield item0
打赏
收藏
点击回答
- 共 0 条
- 全部回答
-
真矢马也 普通会员 1楼
是的，Scrapy 中的参数可以通过 Python字典来传入。下面是一个例子：
```python from scrapy import Spider, Request, json
class MySpider(Spider): name = 'my_spider' allowed_domains = ['example.com'] start_urls = ['http://example.com']
def parse(self, response): # 这里可以通过字典来获取参数 params = response.json()['params'] # 使用这些参数执行后续操作 # ...```
在这个例子中，
params是一个 Python 字典，包含了爬虫需要执行的操作所需的参数。你可以通过调用response.json()['params']来获取这些参数。请注意，Scrapy 的参数传递方式主要是通过 Python 字典来实现的。如果你需要在 Python 中传递其他类型的参数，你可能需要使用其他方法，如 JSON 序列化或字节流。
更多回答
网站公告
- 扫一扫访问手机版
回答动态
- 神奇的四哥：发布了悬赏问题阿里云幻兽帕鲁服务器更新之后。服务器里面有部分玩家要重新创建角色是怎么回事啊？预计能赚取 0积分收益
- 神奇的四哥：发布了悬赏问题函数计算不同地域的是不能用内网吧？预计能赚取 0积分收益
- 神奇的四哥：发布了悬赏问题ARMS可以创建多个应用嘛?预计能赚取 0积分收益
- 神奇的四哥：发布了悬赏问题在ARMS如何申请加入公测呀？预计能赚取 0积分收益
- 神奇的四哥：发布了悬赏问题前端小程序接入这个arms具体是如何接入监控的，这个init方法在哪里进行添加？预计能赚取 0积分收益
- 神奇的四哥：发布了悬赏问题阿里云幻兽帕鲁服务器刚到期，是不是就不能再导出存档了呢？预计能赚取 0积分收益
- 神奇的四哥：发布了悬赏问题阿里云幻兽帕鲁服务器的游戏版本不兼容 尝试更新怎么解决？预计能赚取 0积分收益
- 神奇的四哥：发布了悬赏问题阿里云幻兽帕鲁服务器服务器升级以后 就链接不上了，怎么办？预计能赚取 0积分收益
- 神奇的四哥：发布了悬赏问题阿里云幻兽帕鲁服务器转移以后服务器进不去了，怎么解决？预计能赚取 0积分收益
- 神奇的四哥：发布了悬赏问题阿里云幻兽帕鲁服务器修改参数后游戏进入不了，是什么情况？预计能赚取 0积分收益
- 回到顶部
- 回到顶部