每个 Fetch、Count 和 Query 操作消耗多少数据存储读取？

Question

我正在阅读有关 Google App Engine 分组许多用户的信息 (Fig1, 图2，图3)无法弄清楚其计费报告中大量数据存储读取的来源。
您可能知道，数据存储区读取上限为每天 5 万次操作，超过这个预算你就必须付费。

50K 操作听起来像是很多资源，但不幸的是，似乎每个操作（查询、实体获取、计数..）都隐藏了多个数据存储读取。

是否可以通过 API 或其他方法知道有多少数据存储读取隐藏在常见的 RPC.get 、 RPC.runquery 调用后面？

Appstats 在这种情况下似乎毫无用处，因为它只提供 RPC细节而不是隐藏的读取成本。

有一个像这样的简单模型：

class Example(db.Model):
    foo = db.StringProperty()    
    bars= db.ListProperty(str)

以及数据存储中的 1000 实体，我对此类操作的成本感兴趣：

items_count =  Example.all(keys_only = True).filter('bars=','spam').count()

items_count = Example.all().count(10000) 

items = Example.all().fetch(10000)

items = Example.all().filter('bars=','spam').filter('bars=','fu').fetch(10000)

items = Example.all().fetch(10000, offset=500)

items = Example.all().filter('foo>=', filtr).filter('foo<', filtr+ u'\ufffd')

Answer 1

只是为了确保：

我几乎可以肯定：

Example.all().count(10000)

这个使用小型数据存储操作（不需要获取实体，只需获取键），因此这将算作 1 次读取 + 10,000（最大）小操作。

Answer 2

请参阅 http://code.google.com/appengine/docs/billing.html# Billable_Resource_Unit_Cost 。
查询需要 1 次读取加上每个返回实体的 1 次读取。 “返回”包括按偏移量或计数跳过的实体。
因此，每个读取次数为 1001 次：

Example.all(keys_only = True).filter('bars=','spam').count() 
Example.all().count(1000)
Example.all().fetch(1000)
Example.all().fetch(1000, offset=500)

对于这些读取次数，收费的读取次数为 1 加上与过滤器匹配的实体数量：

Example.all().filter('bars=','spam').filter('bars=','fu').fetch()
Example.all().filter('foo>=', filtr).filter('foo<', filtr+ u'\ufffd').fetch()

您应该考虑将计数存储在数据存储中，而不是使用计数，如果需要更新，则进行分片每秒计数一次以上。 http://code.google.com/appengine/articles/sharding_counters.html

只要有可能，您应该使用游标而不是偏移量。