使用python爬虫时，遇到多页，需要翻页，下一页时怎么处理

例子如下：
item1 = Item()
yield item1
item2 = Item()
yield item2
req = Request(url='下一页的链接', callback=self.parse)
yield req
注意：使用yield时不要用return语句。本回答被提问者采纳