去除猪

Question

空行我有一个数据集，像一击：

1,abc,10000 
,zxcv,2000 
, , , 
4,xyz,50000 

我想输出，如：

1,abc,10000 
zxcv,2000 
4,xyz,50000 

我怎样才能实现这个任务？ 即我想删除空行和null值。

Answer 1

尝试Filter Operator：

A = LOAD 'your_data' USING PigStorage() AS (your fields); 

B = FILTER A BY your_fields IS NOT NULL;