scrapy pipeline中不能自定义函数吗

2025-03-11 05:27:01
推荐回答(1个)
回答1:

爬虫跟踪下一页的方法是自己模拟点击下一页连接,然后发出新的请求。请看: item1 = Item()yield item1item2 = Item()yield item2req = Request(url='下一页的链接', callback=self.parse)yield req 注意使用yield时不要用return语句。