返回介绍

Pig Union 运算符

发布于 2024-06-23 16:54:49 字数 3059 浏览 0 评论 0 收藏 0

Union 运算符

Pig Latin的UNION运算符用于合并两个关系的内容。要对两个关系执行UNION操作,它们的列和域必须相同。
语法
下面给出的是UNION运算符的语法。

  1. grunt> Relation_name3 = UNION Relation_name1, Relation_name2;

假设我们在HDFS的/pig_data/目录中有两个文件,即student_data1.txt和student_data2.txt,如下所示。

  1. 001,Rajiv,Reddy,9848022337,Hyderabad
  2. 002,siddarth,Battacharya,9848022338,Kolkata
  3. 003,Rajesh,Khanna,9848022339,Delhi
  4. 004,Preethi,Agarwal,9848022330,Pune
  5. 005,Trupthi,Mohanthy,9848022336,Bhuwaneshwar
  6. 006,Archana,Mishra,9848022335,Chennai.
  1. 7,Komal,Nayak,9848022334,trivendram.
  2. 8,Bharathi,Nambiayar,9848022333,Chennai.

并将这两个文件通过关系Student1和Student2加载到Pig中,如下所示。

  1. grunt> student1 = LOAD 'hdfs://localhost:9000/pig_data/student_data1.txt' USING PigStorage(',')
  2. as (id:int, firstname:chararray, lastname:chararray, phone:chararray, city:chararray);
  3. grunt> student2 = LOAD 'hdfs://localhost:9000/pig_data/student_data2.txt' USING PigStorage(',')
  4. as (id:int, firstname:chararray, lastname:chararray, phone:chararray, city:chararray);

现在,让我们使用UNION运算符合并这两个关系的内容,如下所示。

  1. grunt> student = UNION student1, student2;

验证
如下所示,使用DUMP运算符验证student学生。

  1. grunt> Dump student;

输出
它将显示以下输出,显示关联学生的内容。

  1. (1,Rajiv,Reddy,9848022337,Hyderabad) (2,siddarth,Battacharya,9848022338,Kolkata)
  2. (3,Rajesh,Khanna,9848022339,Delhi)
  3. (4,Preethi,Agarwal,9848022330,Pune)
  4. (5,Trupthi,Mohanthy,9848022336,Bhuwaneshwar)
  5. (6,Archana,Mishra,9848022335,Chennai)
  6. (7,Komal,Nayak,9848022334,trivendram)
  7. (8,Bharathi,Nambiayar,9848022333,Chennai)

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文