spark-acid:基于Hive ACID的Apache Spark的ACID数据源

时间:2021-03-14 13:07:48
【文件属性】:
文件名称:spark-acid:基于Hive ACID的Apache Spark的ACID数据源
文件大小:221KB
文件格式:ZIP
更新时间:2021-03-14 13:07:48
big-data spark hive acid hive-acid 适用于Apache Spark的Hive ACID数据源 一个基于Spark Datasource V1 API的数据源,为提供Spark支持。 此数据源提供了与Hive ACID V2表,完全ACID表以及仅插入表一起使用的功能。 功能可用性矩阵 功能性 完整的ACID表 仅插入表格 读 >= v0.4.0 >= v0.4.0 插入/覆盖 >= v0.4.3 >= v0.4.4 CTAS >= v0.4.3 >= v0.4.4 更新 >= v0.5.0 不支持 删除 >= v0.5.0 不支持 合并 > v0.5.0 不支持 流插入 >= v0.5.0 >= v0.5.0 注意:如果仅插入表以支持写操作,则需要禁用兼容性检查 快速开始 快速开始 先决条件 这些是使用此库的先决条件: 您具有版本3.1.2或更高版本的Hive Metastore DB。 有关详

网友评论