查询后无法获取整个网页

Question

我正在尝试抓取此页面上找到的历史 NAVPS 表：
http://www.philequity.net/pefi_historicalnavps.php

这里所有的代码都是以下内容我的最小工作脚本。所以它开始于：

import urllib
import urllib2
from BeautifulSoup import BeautifulSoup

opener = urllib2.build_opener()
urllib2.install_opener(opener)

使用 Chrome 的 Inspect Element 研究网页后，我发现发送的表单数据如下：

form_data = {}
form_data['mutualFund'] = '1'
form_data['year'] = '1995'
form_data['dmonth'] = 'Month'
form_data['dday'] = 'Day'
form_data['dyear'] = 'Year'

因此我继续构建请求：

url = "http://www.philequity.net/pefi_historicalnavps.php"
params = urllib.urlencode(form_data)
request = urllib2.Request(url, params)

我希望这相当于填写后单击“获取 NAVPS”形式：

page = urllib2.urlopen(request)

然后我用 BeautifulSoup 阅读它：

soup = BeautifulSoup(page.read())
print soup.prettify()

但是唉！我只获得网页，就好像我没有单击“获取 NAVPS”:( 我错过了什么吗？服务器是否在单独的流中发送表？我如何访问它？

Answer 1

当我查看 firebug 中的 POST 请求时，我发现您还没有传递一个参数：“type”是“Year”。我不知道这是否能为您提供数据，还有许多其他原因可能无法为您提供数据。