从 LS 获取城市列表时遇到问题

Question

我正在努力获取一系列 LS 城市... file_get_contents() 在其路障上返回一个空的下拉列表，要求您选择城市。不幸的是它是空的...所以我认为它来自 ajax 请求。但查看页面时，我在页面上没有看到任何 ajax 请求。然后我尝试了 CURL，认为也许模拟浏览器会有所帮助......下面的代码没有任何影响。

$ch = curl_init("http://www.URL.com/");
curl_setopt($ch, CURLOPT_VERBOSE, true);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);
curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.0.3705; .NET CLR 1.1.4322)');
$result=curl_exec($ch);
var_dump($result);

有人对如何获得可用区域的可靠列表有任何想法吗？

Answer 1

我已经了解了他们如何填充城市列表，并在下面创建了一些您可以使用的示例代码。

城市列表作为 JSON 字符串存储在其中一个 javascript 文件中，并且该列表实际上是从另一个 javascript 文件填充的。文件的名称似乎有些随机，但根名称保持不变。

包含城市 JSON 的 JS 文件示例为 hXXp://a3.ak.lscdn.net/deals/system/javascripts/bingy-81bf24c3431bcffd317457ce1n434ca9.js 填充列表的脚本为hXXp://a2.ak.lscdn.net/deals/system/javascripts/confirm_city-81bf24c3431bcffd317457ce1n434ca9.js 但对我们来说这是无关紧要的。

我们需要使用新的curl会话加载他们的主页，查找唯一的javascript URL（即bingy脚本）并使用curl获取它。然后我们需要找到 JSON 并将其解码为 PHP，以便我们可以使用它。

这是我想出的对我有用的脚本：

<?php

error_reporting(E_ALL); ini_set('display_errors', 1);  // debugging

// set up new curl session with options
$ch = curl_init('http://livingsocial.com');
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (X11; U; Linux x86_64; en-US; rv:1.9.2.13) Gecko/20101206 Ubuntu/10.10 (maverick) Firefox/3.6.13');

$res = curl_exec($ch); // fetch home page

// regex string to find the bingy javascript file
$matchStr = '/src="(https?:\/\/.*?(?:javascripts)\/bingy-?[^\.]*\.js)"/i';

if (!preg_match($matchStr, $res, $bingyMatch)) {
    die('Failed to extract URL of javascript file!');
}

// this js file is now our new url
$url = $bingyMatch[1];

curl_setopt($ch, CURLOPT_URL, $url);

$res = curl_exec($ch); // fetch bingy js

$pos = strpos($res, 'fte_cities'); // search for the fte_cities variable where the list is stored

if ($pos === false) {
    die('Failed to locate cities JSON in javascript file!');
}

// find the beginning of the json string, and the end of the line
$startPos = strpos($res, '{', $pos + 1);
$endPos   = strpos($res, "\n", $pos + 1);

$json = trim(substr($res, $startPos, $endPos - $startPos)); // snip out the json

if (substr($json, -1) == ';') $json = substr($json, 0, -1); // remove trailing semicolon if present

$places = json_decode($json, true); // decode json to php array

if ($places == null) {
    die('Failed to decode JSON string of cities!');
}

// array is structured where each country is a key, and the value is an array of cities
foreach($places as $country => $cities) {
    echo "Country: $country<br />\n";

    foreach($cities as $city) {
        echo '  '
            ."{$city['name']} - {$city['id']}<br />\n";
    }

    echo "<br />\n";
}

一些重要的注意事项：

如果他们决定更改 javascript 文件名，这将无法工作。
如果他们重命名保存城市的变量名称，这将不起作用。
如果他们修改 json 以跨越多行，这将不起作用（这不太可能，因为它使用额外的带宽）
如果他们改变了 json 对象的结构，这将不起作用。

无论如何，根据他们的修改，重新开始工作可能很简单，但这是一个潜在的问题。他们也可能不太可能进行这些后勤更改，因为这需要修改许多文件，然后需要更多测试。

希望有帮助！

Answer 2

也许有点晚了，但您不需要耦合到我们的 JavaScript 来获取城市列表。我们为此提供了一个 API：

https://sites.google。 com/a/hungrymachine.com/livingsocial-api/home/cities