添加由 Athena 中的两个现有列组成的列

Question

我有一个由 100 列组成的表，其中两列是 dt 和 tm，它们是分区。看起来像这样：

-------------------
| dt          tm  |
-------------------
| 2022/01/01  10  |
| 2022/01/02  15  |
| 2022/01/03  03  |
| 2022/01/04  20  |
-------------------

我希望能够添加另一列，它将用作基于 dt 和 tm 的“连接”的时间戳。也就是说：

--------------------------------------------
| dt          tm  timestamp                |
--------------------------------------------
| 2022/01/01  10  2022/01/01 10:00:00      |
| 2022/01/02  15  2022/01/02 15:00:00      |
| 2022/01/03  03  2022/01/03 03:00:00      |
| 2022/01/04  20  2022/01/04 20:00:00      |
--------------------------------------------

该表是使用 Glue 创建的，并使用爬虫每隔几个小时更新一次。

到目前为止，我尝试使用 ALTER TABLE ADD COLUMNS 函数，但无法解决问题，因为除了新列的名称及其类型之外，我无法添加任何内容。我需要的是添加一个为添加的每个新行计算的列。 这可能吗？ 感谢任何帮助！

Answer 1

坦率地说，我建议您在表上创建一个具有附加列的视图，而不是添加另一列。

这样，每当在原始表中添加数据时，额外的列将包含您期望的数据。无需“填充”附加列。

如果您的字段是 TEXT，您可以使用：

CREATE VIEW my_view AS
SELECT
  *,
  dt || ' ' || tm || ':00:00' as timestamp
FROM table

如果您的字段是 DATE 和 INT 并且您想要 TIMESTAMP 输出，请使用：

CREATE VIEW my_view AS
SELECT
  *,
  CAST(dt as TIMESTAMP) + tm * interval '1' hour as timestamp
FROM table

然后您可以使用视图的名称访问表，例如：

SELECT * FROM my_view
WHERE timestamp < '2022-01-01'