我如何刮擦“肯塔基州”一词。从整个页面？

Question

每次我运行此代码时，它只会给我三遍数据，但我知道它在页面上会弹出更多次。

   from bs4 import BeautifulSoup
   import requests

   url = 'https://www.nba.com/players'
   result = requests.get(url)
   doc = BeautifulSoup(result.text, 'lxml')
   college = doc.find_all(text='Kentucky')
   print(college)

Answer 1

这是因为带有文本的Find_all将搜索精确的文本匹配。

college = doc.find_all(text='Kentucky')

有效的一个： ＆lt; option value =“ kentucky”＆gt; kentucky＆lt;/option＆gt;。
无效： ＆lt;选项值=“ Western Kentucky”＆gt; Western Kentucky＆lt;/option＆gt;。

如果您想找到所有发生的事件，则需要使用正则表达式。
检查 beautiful-soup-doc-doc 。还使用字符串而不是文本。

The string argument is new in Beautiful Soup 4.4.0.
In earlier versions it was called text:

import re
from bs4 import BeautifulSoup
import requests

url = 'https://www.nba.com/players'
result = requests.get(url)
doc = BeautifulSoup(result.text, 'lxml')
college = doc.find_all(string=re.compile("Kentucky"))
print("Total elements: " + str(len(college)))
print(college)

输出：

Total elements: 6
['Kentucky', 'Western Kentucky', 'Kentucky', 'Western Kentucky', 'Kentucky', '{"props":{"pageProps":{"la