0
点赞
收藏
分享

微信扫一扫

Hudi Spark Sql Procedures 回滚 Hudi 表数据

西风白羽 2024-06-12 阅读 4
sparkhudi

前言

因为有 Hudi Rollback 的需求,所以单独总结 Hudi Spark Sql Procedures Rollback。

版本

  • Hudi 0.13.0(发现有bug)、(然后升级)0.14.1
  • Spark 3.2.3

Procedures

官方文档:https://hudi.apache.org/docs/procedures
相关阅读:Hudi Spark SQL Call Procedures学习总结(一)(查询统计表文件信息)

Rollback

官方文档:https://hudi.apache.org/docs/rollbacks

回滚数据,可以回滚到至上一个commit(成功的),也可以回滚到指定 commit (savepoint)。本文暂不涉及savepoint,只总结 回滚到上一个 commit。

  • 自动回滚:默认写任务时会自动触发回滚:rollbackFailedWrites
    每次写数据前会先检测上一个commit是否完成,如

举报

相关推荐

0 条评论