从 Twitter XML 页面提取数据的列表问题

Question

通过我的函数，我可以从 Twitter xml 搜索页面中提取我正在作为项目构建的朋友查找应用程序的用户名。但问题是，当我抓取用户名并将它们输入到列表中时，会发生一些奇怪的事情。我没有将每个用户名作为列表中的单独元素，而是将每个用户名作为其自己的列表。

所以我得到了 20 个左右的列表。这是我的代码产生的示例 list = ["twitter.com/username"], ["twitter.com/username1"],["twitter.com/username2"]

所以你会看到每个用户名都是它自己的列表。我没有使用一个包含三个值的列表，而是使用三个列表，每个列表中各有一个值。这对于迭代来说绝对是一场噩梦。我怎样才能拥有一个包含三个元素的列表？

代码在这里：

def get_names(search_term = raw_input("What term do you want to search for?")):
    search_page = "http://search.twitter.com/search.atom?q="
    search_page += search_term
    data = []
    doc = urllib.urlopen(search_page).read()
    soup = BeautifulStoneSoup(''.join(doc))
    data = soup.findAll("uri")
    for uri in soup.findAll('uri'):
        data = []
        uri = str(uri.extract())
        data.append(uri[5:-6] 
        print data

Answer 1

您正在为每个 URI 创建一个名为 data 的新列表。如果将 data = [] 行移出 for uri in soup.findAll('uri'): 循环，则最终应该得到一个列表，而不是一个列表列表的列表。

此外，您还遇到一些其他问题。
倒数第二行存在语法错误：行尾缺少右括号。
你有重复的行。尝试删除第一行 data = [] 行以及 data = soup.findAll('url') 行，因为您只是再次执行 findAll for 循环。
此外，您不应该将 raw_input 放在函数签名中，因为这意味着它在定义函数时被调用，而不是在调用函数时被调用。

试试这个：

def get_names():
    search_page = "http://search.twitter.com/search.atom?q="
    search_page += raw_input("What term do you want to search for?")
    doc = urllib.urlopen(search_page).read()
    soup = BeautifulStoneSoup(doc)
    doc.close()
    data = [str(uri.extract())[5:-6] for uri in soup.findall('uri')]
    return data
names = get_names()
print(names)

编辑：您也不需要 ''.join(doc)，read() 返回单个字符串，而不是序列； data 可以通过字符串理解来组装。

Answer 2

问题是你的数据分配有些混乱。
我建议将该代码更改为：（

def get_names(search_term = raw_input("What term do you want to search for?")):
    search_page = "http://search.twitter.com/search.atom?q="
    search_page += search_term
    data = []
    doc = urllib.urlopen(search_page).read()
    soup = BeautifulStoneSoup(''.join(doc))
    for uri in soup.findAll('uri'):
        uri = str(uri.extract())
        data.append(uri[5:-6])
    print data
    return data

未经测试，因为我不知道 BeautifulStoneSoup 指的是什么）

HTH

Pacific