网页抓取：我得到了所需的结果，但 get_text 在读取空行时提供错误。有什么想法吗？

Question

import requests

from bs4 import BeautifulSoup

url = "https://en.wikipedia.org/wiki/List_of_Presidents_of_the_United_States"

page = requests.get(url)

#print(page.status_code)

#print(page.content)

soup = BeautifulSoup(page.content, 'html.parser')

#print(soup.prettify())


tb = soup.find('table', class_='wikitable')

"""for link in tb.find_all('b'):
    name = link.find('a')
    print(name)"""

for link in tb.find_all('b'):
    name = link.find('a')
    print(name.get_text('title'))

我相信它正在读取表格，然后当它到达空行时我收到错误。

Answer 1

如果未找到请求的标签，find 方法将返回 None，因此您必须检查这一点：

for link in tb.find_all('b'):
    name = link.find('a')
    if name is not None:
        print(name.get_text())

此外 .get_text 方法只是剥离每个标签并返回其中的文本，因此您传递的论点可能不会达到您期望的效果。 Soup 只是将其视为分隔符。这是此方法的签名：

def get_text(self, separator="", strip=False,
             types=default):

文档：https://www.crummy。 com/software/BeautifulSoup/bs4/doc/#get-text