在创建表中为PubSub源指定的无支撑架构

Question

跟随 link> link 我在Google，在Google，我正在尝试进行示例设置，以在PubSub中发布消息，并使用DataFlow SQL将其加载到BigQuery表中。

但是，当我创建数据流的作业时，AR会低于错误：

无效/无支持的SQL作业启动论点：无效表 数据目录中的规格：为Pu​​bSub指定的未支撑架构 create table中的来源。pubsub主题的创建表必须包括 “ event_timestamp”类型“ Timestamp”字段'

请帮助我解决此问题并澄清我的以下疑问：

1. 是否必须将Event_timestamp字段保存在PubSub架构/dataflow SQL/BigQuery Table中？
2. 当我使用Schema创建PubSub时在DataFlow SQL中 显示了架构。
3. 在搜索主题名称时，

它

Answer 1

我能够遵循文档，并取得了成功的结果。对您的问题的回答：

1。是否必须将Event_timestamp字段保存在pubsub架构/dataflow sql/bigquery表中？

是的，是的，是的，在这种情况下是必要的，因为在以下查询中，它使用

 SELECT
   sr.sales_region,
   TUMBLE_START("INTERVAL 15 SECOND") AS period_start,
   SUM(tr.amount) as amount
 FROM pubsub.topic.`project-id`.transactions AS tr
   INNER JOIN bigquery.table.`project-id`.dataflow_sql_tutorial.us_state_salesregions AS sr
   ON tr.state = sr.state_code
 GROUP BY
   sr.sales_region,
   TUMBLE(tr.event_timestamp, "INTERVAL 15 SECOND")

2。当我使用架构创建PubSub主题时，它并未反映在数据流SQL中，而当我使用gcloud data-catalog条目从云外壳中手动分配它时，它在搜索主题名称时会在数据流SQL中反映出来。因此，这是将架构分配到pubsub主题的正确方法

您可以使用控制台/gcloud分配架构。但是，当使用Console/gcloud命令时，它们会受到以下限制 ：

以下是有关使用模式的一些准则：

• 您不能将模式添加到现有主题中。
• 您只能在创建主题时才指定模式。
• 架构与主题关联后，您无法更新模式或删除其与该主题的关联。
• 您可以将相同的模式应用于其他新主题。

您可以在更新现有架构时使用gcloud Data-catalog条目更新。

3。数据目录还没有显示分配给PubSub主题的模式。

您可以使用 gcloud data-catalog条目查找 ，让我知道。