hadoop - ブタのバッグから物を取り出す

Question

豚の例では:

A = LOAD 'student.txt' AS (name:chararray, term:chararray, gpa:float);

DUMP A;
(John,fl,3.9F)
(John,wt,3.7F)
(John,sp,4.0F)
(John,sm,3.8F)
(Mary,fl,3.8F)
(Mary,wt,3.9F)
(Mary,sp,4.0F)
(Mary,sm,4.0F)

B = GROUP A BY name;

DUMP B;
(John,{(John,fl,3.9F),(John,wt,3.7F),(John,sp,4.0F),(John,sm,3.8F)})
(Mary,{(Mary,fl,3.8F),(Mary,wt,3.9F),(Mary,sp,4.0F),(Mary,sm,4.0F)})

C = FOREACH B GENERATE A.name, AVG(A.gpa);

DUMP C;
({(John),(John),(John),(John)},3.850000023841858)
({(Mary),(Mary),(Mary),(Mary)},3.925000011920929)

---

最後の出力 A.name はバッグです。バッグから物を取り出すにはどうすればよいですか：

(John, 3.850000023841858)
(Mary, 3.925000011920929)

Answer 1

GROUPは、あなたがグループ化した という魔法のアイテムを作成groupします。これはまさにこの目的のために作られています。

B = GROUP A BY name;

C = FOREACH B GENERATE group AS name, AVG(A.gpa);

をチェックしてください。そこにあるDESCRIBE B;ことがわかりますgroup。BY ...の部分にあったものを表す単一の値ですGROUP。