使用 BeautifulSoup 时抑制/忽略特定类型错误的任何方法

Question

我抓取的每个页面上都有许多元素，但许多页面没有我需要的所有项目，因此我最终不得不将每个项目都包裹在其中，

try:
    itemNeeded = soup.find(text="yada yada yada").next
except AttributeError:
    pass

这使我的代码膨胀了 400%。
有没有什么办法可以把它抽象出来，或者至少减少碍眼的地方？

编辑：我不仅搜索字符串，而且还做这样的事情：

navLinks = carSoup.find("span", "nav").findAll("a")
carDict['manufacturer'] = navLinks[1].next
carDict['model'] = navLinks[2].next

Answer 1

构建一个列表并迭代该列表...使用一些模板..您只需要弄清楚如何以更小、更简单的方式迭代整个页面。

text_list = ['items', 'to', 'search', 'for']
pre_find = {'items': (('span', 'nav'), 'a', ('manufacturer', 'model'))}
carDict = {}
for text in text_list:
    try:
        if pre_find.has_key(text):
            x = 1
            navLinks = carSoup.find(pre_find[text][0]).findAll(pre_find[text][1])
            for item in pre_find[text][2]:
                carDict[item] = navLinks[x].next
                x += 1
        else:
            carDict[text] = soup.find(text=text).next
    except AttributeError:
        pass

Answer 2

您是否考虑过编写一个更全局的 try except 块，例如：

try:
    itemNeeded = soup.find(text="yada yada yada").next
    nextItem = soup.find(text = "blah blah blah").next
except AttributeError:
    pass