为什么解析仅在每个表的第一项上发生
我是Python和Web刮擦的新手，我很乐意一些建议。我创建了蜘蛛，但是JSON输出仅提供每个表的第一个元素。谁能让我知道这是什么原因？ import scrapy cl…
需要帮助理解＆＃x27; scrapy＆＃x27;错误信息
最近，我已经完成了一项更新使用网络刮擦程序的网站的任务，但是，我是新的。该程序的先前创建者给我的说明是运行main_executor.py，网站应该毫无问题…
如何获得不确定的“＆lt; p＆gt;”使用零食的标签？
如何使用scrapy获取不确定的＆lt; p＆gt; 标签的文字？如以下两个示例所示： 获取所有＆lt; p＆gt; 在＆lt; h2＆gt; h2＆gt; xxxx特征＆lt;/h2＆gt; …
有没有一种方法可以自定义废纸jsonlines出口商不包含null/默认值？
我正在使用与Pydantic的废料建造一些网络刮刀。我们当前正在使用JSONLINES项目出口商将数据输出到文件中。这是刮板创建的JSON线的示例。 { "timestamp…
外部＆lt; li＆gt; ＆＆lt; ul＆gt;使用砂纸
我是新手的废品，但是我遇到了一个问题，该问题基于废料的教程代码，基本上是我试图列出所有业务，他们的地址和他们的网站。但是，当我尝试列出它们时…
如何在砂纸中构建自己的中间件？
我刚刚开始学习纸巾，我有一个问题。对于我的“蜘蛛”，我必须从Google表格表中获取一个URL（start_url）列表，并且我有此代码： import gspread from…
