与 apache Pig 拉丁语中的 GROUP 相反？

Question

假设我在 apache pig 中有以下输入：

(123, ( (1, 2), (3, 4) ) )
(666, ( (8, 9), (10, 11), (3, 4) ) )

并且我想将这 2 行转换为以下 7 行：

(123, (1, 2) )
(123, (3, 4) )
(666, (8, 9) )
(666, (10, 11) )
(666, (3, 4) )

即，这有点“与 GROUP 相反”。这在猪拉丁语中可能吗？

Answer 1

看看FLATTEN。它可以满足您可能需要的功能。

但是，使用上面的符号，元组列表看起来像是一个元组。这应该是一个袋子才能正常工作。

而不是：

(123, ( (1, 2), (3, 4) ) )
(666, ( (8, 9), (10, 11), (3, 4) ) )

您应该将数据表示为：

(123, { (1, 2), (3, 4) } )
(666, { (8, 9), (10, 11), (3, 4) } )

然后，一旦采用这种形式，您可以执行以下操作：

O = FOREACH grouped GENERATE $0, FLATTEN($1);