Spark的ExactlyOnce

时间:2022-12-20 16:48:54
【文件属性】:
文件名称:Spark的ExactlyOnce
文件大小:15KB
文件格式:RAR
更新时间:2022-12-20 16:48:54
ExactlyOnce 包括mysql\redis\hbase的ExactlyOnce操作,其中使用一些简易的demo完成了mysql和redis操作ExactlyOnce(聚合类),hbase完成ExactlyOnce(幂等性)。其余数据库的ExactlyOnce都类似,先写入数据,在将偏移量写入到数据库,并且开启事务完成精准一次性写入
【文件预览】:
Spark
----pom.xml(6KB)
----dependency-reduced-pom.xml(3KB)
----src()
--------test()
--------main()
----.idea()
--------workspace.xml(2KB)
--------misc.xml(526B)
--------scala_compiler.xml(186B)
--------compiler.xml(538B)
--------codeStyles()
----Spark.iml(81B)

网友评论