如何从具有 DnP 防火墙 (PHP) 的 url 获取 HTML 代码

Question

我使用了 file_get_contents 和简单的 html dom (http://simplehtmldom.sourceforge.net) 但无法获取此 URL 的 HTML:

http://forum.hui.vn/Thread-nhung-hanh-dong-ngo-ngan-cua-dan-ong-15824?action=lastpost

我得到的 HTML 是 DnP防火墙。请帮助从具有 DnP 防火墙的 url 获取 HTML 代码。谢谢你！

Answer 1

您需要在解决方案中启用 cookie。
该站点正在尝试设置一个会话 ID Cookie，您需要对其进行响应，以免每次都获得新会话。

基本上，您需要解析最初获得的服务器响应的标头，并在新响应中发回相同的 cookie。到该页面上“操作”表单中指定的位置：

<form name=dnp_firewall method=get action=dnp_fw.php>
<input type=hidden value="/Thread-nhung-hanh-dong-ngo-ngan-cua-dan-ong-15824?action=lastpost" name="dnp_firewall_redirect">
<input type=submit value=" " alt="Click to continue to your destination" style="background-image:url(default.png); height:350px; width:575px; cursor:pointer; 

您将形成如下所示的响应：

dnp_fw.php?dnp_firewall_redirect=/Thread-nhung-hanh-dong-ngo-ngan-cua-dan-ong-15824?action=lastpost&submit=%20

然后您需要处理由于这些操作而发生的任何重定向。

在这种情况下， 建议将您的 UserAgent 设置为常见的内容，例如：

Mozilla/5.0 (Windows NT 6.0) AppleWebKit/535.1 (KHTML, like Gecko) Chrome/14.0.835.202 Safari/535.1

或者您可以只使用 Curl
http://php.net/manual/en/book.curl.php