当前位置：文江博客话题详情

我该如何将新的蜘蛛ARG添加到我自己的纸杯/Zyte模板中

发布于 2025-01-21 11:14:35 字数 52 浏览 0 评论 0原文

我正在研究一个付费代理蜘蛛模板，并希望能够在命令行上通过新的论点进行擦伤轨道。我该怎么做？

原文

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

街角迷惘 2025-01-28 11:14:35

这是可以通过在蜘蛛的__init __-方法中使用kwargs来实现的：

import scrapy


class YourSpider(scrapy.Spider):
    name = your_spider

    def __init__(self, *args, **kwargs):
        super(YourSpider, self).__init__(*args, **kwargs)
        self.your_arg = kwargs.get("your_cmd_arg", 42)

现在可以按以下方式调用蜘蛛：
scrapy crawl your_spider -A yous_cmd_arg = foo

有关该主题的更多信息，请随时检查此页面 scrapy文档中。

This is achievable by using kwargs in your spider's __init__-Method:

import scrapy


class YourSpider(scrapy.Spider):
    name = your_spider

    def __init__(self, *args, **kwargs):
        super(YourSpider, self).__init__(*args, **kwargs)
        self.your_arg = kwargs.get("your_cmd_arg", 42)

Now it would be possible to call the spider as follows:
scrapy crawl your_spider -a your_cmd_arg=foo

For more information on the topic, feel free to check this page in the Scrapy documentation.

回复收藏 0 原文

~没有更多了~