从python那里获取Wikipedia的所有标题

Question

我需要从意大利维基百科获取所有标题。我已经写了这个代码：

import requests
  
 S = requests.Session()

    URL = "https://it.wikipedia.org/w/api.php"

    PARAMS = {
            "action": "query",
            "format": "json",
            "list": "allpages",
            "aplimit": "max",
        }
   
    R = S.get(url=URL, params=PARAMS)
    DATA = R.json()
    PAGES = DATA["query"]["allpages"]
    for page in PAGES:
        print(page['title'])

但是这只会给我打印出前500个标题。我如何获得其余标题？

Answer 1

我使用了您的请求，并找到了以下内容：

>>> DATA["continue"]
{'apcontinue': "'Ndranghetista", 'continue': '-||'}

并且按照所有页面文档：

apcontinue：当有更多结果可用时，请使用它继续。

因此，要继续前进：

full_data=[]
full_data.extend(DATA["query"]["allpages"])

while DATA["batchcomplete"] == "":
  PARAMS.update(DATA["continue"])
  R = S.get(url=URL, params=PARAMS)
  DATA = R.json()

我不确定“批处理”键上的停止条件。请仔细检查，因为我没有在Wikipedia API页面上找到说明。