使用Hive-JSON-SerDe添加数据查询

Question

我正在使用配置单元，我需要以json格式添加数据。我使用https://github.com/rcongiu/Hive-JSON-Serde库。它从文件加载配置单元中的数据。

~$ cat test.json 

{"text":"foo","number":123} 
{"text":"bar","number":345} 

$ hadoop fs -put -f test.json /user/data/test.json 

$ hive 

hive> CREATE DATABASE test; 

hive> CREATE EXTERNAL TABLE test (text string) 
     ROW FORMAT SERDE 'org.openx.data.jsonserde.JsonSerDe' 
     LOCATION '/user/data'; 

hive> SELECT * FROM test; 
OK 

foo 123 
bar 345 

但我需要加载的数据来自查询，如：

insert into table test values {"text": "abc", number: 666} 

谁知道如何做到这一点？

Answer 1

SerDe真正用于从包含数据的文件中读取数据的外部表。所以它不会帮助你直接插入json数据，并且你给出的插入查询作为一个例子将不起作用。我建议你应该将数据写入你的hdfs文件，并在包含该文件的文件夹上创建一个外部表，或者解析传入数据，以便将它插入为列。