在猪存储日期和时间

Question

我想存储分别有两列日期和时间的txt文件。 事情是这样的： 1999-01-01 12点08分56秒

现在我想执行使用PIG一些日期操作，但我想存储日期和时间，这样 1999-01-01T12：08： 56（我检查这个链接）： http://docs.oracle.com/javase/6/docs/api/java/text/SimpleDateFormat.html

我想知道的是，我可以使用什么样的格式，其中我的日期和时间均在一列，这样我可以把它喂的猪，然后如何将该日期载入猪。我知道我们将其更改为日期时间，但它显示错误。有人可以告诉我如何一起加载日期时间数据。一个例子会有很大的帮助。

Answer 1

请让我知道这是否适合你。

input.txt 
1999-01-01 12:08:56 
1999-01-02 12:08:57 
1999-01-03 12:08:58 
1999-01-04 12:08:59 

PigScript: 
A = LOAD 'input.txt' using PigStorage(' ') as(date:chararray,time:chararray); 
B = FOREACH A GENERATE CONCAT(date,'T',time) as myDateString; 
C = FOREACH B GENERATE ToDate(myDateString); 
dump C; 

Output: 
(1999-01-01T12:08:56.000+05:30) 
(1999-01-02T12:08:57.000+05:30) 
(1999-01-03T12:08:58.000+05:30) 
(1999-01-04T12:08:59.000+05:30) 

Now the myDateString is in date object, you can process this data using all the build in date functions. 

Incase if you want to store the output as in this format 
(1999-01-01T12:08:56) 
(1999-01-02T12:08:57) 
(1999-01-03T12:08:58) 
(1999-01-04T12:08:59) 

you can use REGEX_EXTRACT to parse the each data till "." something like this 

D = FOREACH C GENERATE ToString($0) as temp; 
E = FOREACH D GENERATE REGEX_EXTRACT(temp, '(.*)\\.(.*)', 1); 
dump E; 

Output: 
(1999-01-01T12:08:56) 
(1999-01-02T12:08:57) 
(1999-01-03T12:08:58) 
(1999-01-04T12:08:59)