如何在 Google App Engine 中设置 urlfetch 超时？

Question

我试图让 Django（在 GAE 之上）从另一个 Web 服务获取数据。我经常遇到这样的错误：

应用程序错误：2 超时请求

方法：获取

请求网址：http://localhost:8080/

异常类型：下载错误

异常值：ApplicationError：2 超时

异常位置：_get_fetch_result 第 325 行中的 /google_appengine/google/appengine/api/urlfetch.py​​

感觉好像只有 12 秒后才会超时（我不确定，但确实很短） 。

问题：如何设置更长的超时时间？

Answer 1

鉴于这是一个 Python 问题，我想我应该为遇到此问题的任何人提供一个 Python 答案。

只需导入 urlfetch ，然后在代码中执行任何其他操作之前定义截止日期：

from google.appengine.api import urlfetch

urlfetch.set_default_fetch_deadline(60)

Answer 2

您可以使用 的deadline 参数进行设置获取函数。来自文档：

请求处理程序的截止时间最长为 60 秒，任务队列和 cron 作业处理程序的截止时间最长为 10 分钟。如果截止时间为“无”，则截止时间设置为 5 秒。

---

编辑：看起来现在已经改变了。来自此处：

您可以设置请求的截止时间，即服务等待响应的最长时间。默认情况下，获取的截止时间为 5 秒。您可以使用 urlfetch.set_default_fetch_deadline() 函数调整请求的默认截止时间。

此页面列出了默认超时值：

目前，Python 运行时存在多个名为 DeadlineExceededError 的错误：

• google.appengine.runtime.DeadlineExceededError：如果整个请求超时（通常在 60 秒后，对于任务队列请求则为 10 分钟），则会引发此错误。
• google.appengine.runtime.apiproxy_errors.DeadlineExceededError：如果 RPC 超出其截止时间，则会引发该错误。这通常是 5 秒，但对于某些 API 来说可以使用“截止日期”选项进行设置。
• google.appengine.api.urlfetch_errors.DeadlineExceededError：如果 URLFetch 超时，则会引发该错误。

Answer 3

对于 Go，您可能想尝试下面的代码。

// createClient is urlfetch.Client with Deadline
func createClient(context appengine.Context, t time.Duration) *http.Client {
    return &http.Client{
        Transport: &urlfetch.Transport{
            Context:  context,
            Deadline: t,
        },
    }
}

以下是如何使用它。

// urlfetch
client := createClient(c, time.Second*60)

Answer 4

看似很短，但要知道GAE上的请求超时时间在30秒左右。由于您可能需要对 urlfetch 的响应执行一些操作，因此我认为超时不需要超过 10 秒。