您好, 欢迎来到 !    登录 | 注册 | | 设为首页 | 收藏本站

scrapy:当蜘蛛退出时调用一个函数

scrapy:当蜘蛛退出时调用一个函数

看来您可以通过来注册信号监听器dispatcher

我会尝试类似的东西:

from scrapy import signals
from scrapy.xlib.pydispatch import dispatcher

class MySpider(CrawlSpider):
    def __init__(self):
        dispatcher.connect(self.spider_closed, signals.spider_closed)

    def spider_closed(self, spider):
      # second param is instance of spder about to be closed.

在较新版本的scrapyscrapy.xlib.pydispatch中已弃用。相反,您可以使用from pydispatch import dispatcher

其他 2022/1/1 18:42:55 有386人围观

撰写回答


你尚未登录,登录后可以

和开发者交流问题的细节

关注并接收问题和回答的更新提醒

参与内容的编辑和改进,让解决方法与时俱进

请先登录

推荐问题


联系我
置顶