我知道BigQuery支持Avro文件上传,并且我成功地将Avro文件加载到BigQuery中。是否可以使用Snappy压缩将Avro文件加载到BigQuery中?
使用下面的命令,
java -jar avro-tools-1.7.7.jar fromjson --codec snappy --schema-file SourceSchema.avsc Source.json > Output.snappy.avro
我已经产生与斯纳皮压缩试图加载至BigQuery,但加载作业失败,下面的错误的Avro的文件,
Errors:
file-00000000: The Apache Avro library failed to parse file file-00000000. (error code: invalid)
是否有可能加载Avro文件与Snappy压缩到BigQuery中?
由于snappy不受支持,请将编解码器设置为无编码。尽管如此,这会使文件大小膨胀。 –