Apache Pig FOREACH运算符

Apache Pig FOREACH运算符基于数据列生成数据转换。建议使用FILTER操作来处理数据元组。

FOREACH运算符的示例

在此示例中，我们遍历给定文件中存在的两列数据。

执行FOREACH运算符的步骤

• 在本地计算机上创建一个文本文件，并提供一些值。

$ nano pforeach.txt

• 检查写入文本文件的值。

$ cat pforeach.txt

• 将文本文件上载到HDFS的特定目录中。

$ hdfs dfs -put pforeach.txt /pigexample

• 打开Pig MapReduce运行模式。

$ pig

• 加载包含数据的文件。

grunt> A = LOAD '/pigexample/pforeach.txt' USING PigStorage(',') AS (a1:int,a2:int,a3:int) ;

• 现在，执行并验证数据。

grunt> DUMP A;

• 让我们遍历两列的数据。

grunt> fe = FOREACH A generate a1,a2;
grunt> DUMP fe;

在这里，我们得到了期望的输出。