scrapyでdepthごとに処理を分ける

scrapyにおいて深さごとに処理をわけるにはどうすれば良いのでしょうか?
settingのDEPTH_LIMITは1に設定しておいて、


class SpiderSpider(CrawlSpider):
    name = 'spider'
    allowed_domains = []
    start_urls = (
    'https://www.yahoo.co.jp',
    )
    rules = [Rule(LinkExtractor(), callback='parse_item', follow=True)]

    def parse_start_url(self, response):
        # start_urlsのインデックスページもスクレイピングする.
        return self.parse_item(response)

    def parse_item(self, response):
        node = {}
        """if 深さ0なら以下の処理"""
         node['url'] = response.url
         node['type'] = "seed"
         node['color'] = "red"
        """ if 深さ1なら以下の処理"""
         node['url'] = response.url
         node['type'] = "normal"
         node['color'] = "white"
        yield node

のようなかんじで処理を分けたいです。
depthの現在値はどこからひっぱってこれるのでしょうか。。

行動規範の内容に同意します

回答1件

ベストアンサー

response.meta['depth']で取得できます

https://doc.scrapy.org/en/latest/topics/spider-middleware.html#module-scrapy.spidermiddlewares.depth

python
1def parse_item(self, response):
2    node = {}
3
4    if response.meta['depth'] == 0:
5
6        node['url'] = response.url
7        node['type'] = "seed"
8        node['color'] = "red"
9
10    if response.meta['depth'] == 1:
11        node['url'] = response.url
12        node['type'] = "normal"
13        node['color'] = "white"
14
15    yield node