avro4s

    0热度

    2回答

    有没有一种方法可以将一个scv文件转换为Avro而不使用Apache Spark。我看到大部分帖子都使用了火花,这在我的情况下是无法实现的。我有一个单独的文件中的架构。我正在考虑一些使用Schema并将csv转换为avro的自定义序列化器和反序列化器。任何一种参考都适合我。 谢谢

    0热度

    1回答

    我是AVRO的新手。我们已经开始使用AVRO模式来读取数据。 现在我们有一个用例,在阅读时需要截断数据。 假设我的Avro schcema是这样 { "name": "table", "namepsace": "csd", "type": "record", "fields": [ {"name": "CustId", "type":"strin

    0热度

    1回答

    我正在面临的问题 - 减少具有字符串和数组值的avro文件。 org.apache.avro.AvroTypeException: `Describe hdfs:/test/test.avro number STRING totalProductFee STRING productID STRING

    1热度

    1回答

    我有小测试类是这样的: package test.avro object Test extends App { import java.io.ByteArrayOutputStream import com.sksamuel.avro4s.AvroOutputStream case class Composer(name: String, birthplace: