具有不同data_types

Question

我有使用JSON数据的文件，其采取以下形式的JSON数组创建配置单元表“街”： “AA”， “城市”： “BBB” } { “街”： “CCC”， “城市”： “DDD”， “国家”： “EEE” } ] }

上面的Json是一个有效的Json。我想使用JsonSerde在上面的表单的数据之上创建一个配置单元表。

Answer 1

创建包含所有可能字段的表格。如果现场没有出现在JSON，选择将返回NULL：

CREATE EXTERNAL TABLE your_table (
Name string, 
Address array<struct<Street:string,City:string,Country:string>> 
) 
ROW FORMAT SERDE 'org.openx.data.jsonserde.JsonSerDe' 

如果你在JSON文件名与蜂巢冲突的保留字，然后在表定义添加映射和重命名名称：

WITH SERDEPROPERTIES ('mapping.renamed_column'='original_column')和重命名你的表格列。

将您的文件放在表格位置。

参见文档与这里的一些例子：https://github.com/rcongiu/Hive-JSON-Serde