haivvreo:蜂巢+ Avro。 Serde与Hive中的Avro合作

时间:2024-05-29 23:14:32
【文件属性】:

文件名称:haivvreo:蜂巢+ Avro。 Serde与Hive中的Avro合作

文件大小:67KB

文件格式:ZIP

更新时间:2024-05-29 23:14:32

Java

笔记 从 Haivvreo现在直接位于Hive。 以后所有的错误报告都应该放到那里,并且将在允许的情况下将修复程序反向移植到此处(通常是不允许的)。 Hive + Avro = Haivvreo:将Avro放入Hive 概述 Haivvreo(发音尽可能多,并且像领结一样是Diphthongs很酷。)是LinkedIn开发的Hive Serde,用于在Hive中处理Avro编码的数据。 Haivvreo的要点: 从Avro模式推断Hive表的模式。 利用Avro的向后兼容功能,根据指定的架构读取表中的所有Avro文件 支持任意嵌套的架构。 将所有Avro数据类型转换为等效的Hive类型。 大多数类型可以精确映射,但某些Avro类型在Hive中不存在,并且会由Haivvreo自动转换。 了解压缩的Avro文件。 透明地将处理可为null的类型的Avro习惯转换为Union [T,n


【文件预览】:
haivvreo-master
----.gitignore(19B)
----pom.xml(5KB)
----LICENSE(11KB)
----src()
--------test()
--------main()
----readme.md(22KB)
----CHANGES.txt(829B)

网友评论