spark-acid:基于Hive ACID的Apache Spark的ACID数据源

时间:2024-04-03 06:54:28
【文件属性】:

文件名称:spark-acid:基于Hive ACID的Apache Spark的ACID数据源

文件大小:221KB

文件格式:ZIP

更新时间:2024-04-03 06:54:28

big-data spark hive acid hive-acid

适用于Apache Spark的Hive ACID数据源 一个基于Spark Datasource V1 API的数据源,为提供Spark支持。 此数据源提供了与Hive ACID V2表,完全ACID表以及仅插入表一起使用的功能。 功能可用性矩阵 功能性 完整的ACID表 仅插入表格 读 >= v0.4.0 >= v0.4.0 插入/覆盖 >= v0.4.3 >= v0.4.4 CTAS >= v0.4.3 >= v0.4.4 更新 >= v0.5.0 不支持 删除 >= v0.5.0 不支持 合并 > v0.5.0 不支持 流插入 >= v0.5.0 >= v0.5.0 注意:如果仅插入表以支持写操作,则需要禁用兼容性检查 快速开始 快速开始 先决条件 这些是使用此库的先决条件: 您具有版本3.1.2或更高版本的Hive Metastore DB。 有关详


网友评论