99re热视频这里只精品,久久久天堂国产精品女人,国产av一区二区三区,久久久精品成人免费看片,99久久精品免费看国产一区二区三区

scrapy 2.3 常用統(tǒng)計信息收集器使用

2021-06-11 10:30 更新

通過訪問Stats Collector ?stats? 屬性。以下是訪問統(tǒng)計信息的擴展示例:

class ExtensionThatAccessStats:

    def __init__(self, stats):
        self.stats = stats

    @classmethod
    def from_crawler(cls, crawler):
        return cls(crawler.stats)

設(shè)置統(tǒng)計值:

stats.set_value('hostname', socket.gethostname())

增量統(tǒng)計值:

stats.inc_value('custom_count')

僅當大于上一個值時設(shè)置stat值::

stats.max_value('max_items_scraped', value)

僅當?shù)陀谏弦粋€時設(shè)置stat值::

stats.min_value('min_free_memory_percent', value)

獲取統(tǒng)計值:

>>> stats.get_value('custom_count')
1

獲取所有統(tǒng)計信息:

>>> stats.get_stats()
{'custom_count': 1, 'start_time': datetime.datetime(2009, 7, 14, 21, 47, 28, 977139)}
以上內(nèi)容是否對您有幫助:
在線筆記
App下載
App下載

掃描二維碼

下載編程獅App

公眾號
微信公眾號

編程獅公眾號