99久久久精品免费观看国产,紧身短裙女教师波多野,正在播放暮町ゆう子在线观看,欧美激情综合色综合啪啪五月

千鋒教育-做有情懷、有良心、有品質的職業教育機構

手機站
千鋒教育

千鋒學習站 | 隨時隨地免費學

千鋒教育

掃一掃進入千鋒手機站

領取全套視頻
千鋒教育

關注千鋒學習站小程序
隨時隨地免費學習課程

當前位置:首頁  >  應聘面試  >  大數據面試題  > Flink兩階段提交(2PC)

Flink兩階段提交(2PC)

來源:千鋒教育
發布人:wjy
時間: 2022-09-02 15:42:28 1662104548

借助一個文件寫入的例子來說明兩階段提交,在Flink中使用兩階段提交,需要實現TwoPhaseCommitSinkFunction這個抽象類的四個方法,我們下面來說明。

protected abstract TXN beginTransaction() throws Exception; protected abstract void preCommit(TXN transaction) throws Exception; protected abstract void commit(TXN transaction); protected abstract void abort(TXN transaction);  

1. beginTransaction - 在事務開始前,我們在目標文件系統上面的臨時目錄上創建一個臨時文件。隨后,我們在程序處理的時候可以將數據寫入到這個文件。

2. preCommit - 在預提交階段,我們刷新文件到磁盤,關閉文件。

3. commit - 在提交階段,我們原子性的將預提交階段的文件移動到真正的目標目錄。需要注意的是,這增加了輸出數據的可見性的延遲,因為不mv是看不到數據的,延遲時間就是設定的checkpoint的時間。

4. abort - 在終止階段,我們刪除臨時文件 *如果步驟中有任何錯誤,Flink會通過最新的checkpoint來恢復程序狀態。

比如預提交成功了,在通知到達operator之前失敗了。

這時候,Flink將operator的狀態恢復到預提交階段,即還未真正提交的時候。

為了能在重啟的時候能夠正確的終止或者提交事務,我們需要在預提交階段將足夠的信息保存到checkpoint中。

在這個例子中,這些信息是臨時文件以及目標目錄的地址, 當從checpoint恢復時,Flink會先執行一個Commit操作。

Flink兩階段提交(2PC)

tags:
聲明:本站稿件版權均屬千鋒教育所有,未經許可不得擅自轉載。
10年以上業內強師集結,手把手帶你蛻變精英
請您保持通訊暢通,專屬學習老師24小時內將與您1V1溝通
免費領取
今日已有369人領取成功
劉同學 138****2860 剛剛成功領取
王同學 131****2015 剛剛成功領取
張同學 133****4652 剛剛成功領取
李同學 135****8607 剛剛成功領取
楊同學 132****5667 剛剛成功領取
岳同學 134****6652 剛剛成功領取
梁同學 157****2950 剛剛成功領取
劉同學 189****1015 剛剛成功領取
張同學 155****4678 剛剛成功領取
鄒同學 139****2907 剛剛成功領取
董同學 138****2867 剛剛成功領取
周同學 136****3602 剛剛成功領取
相關推薦HOT
主站蜘蛛池模板: 国产91电影| 男按摩师电影| 最近韩国免费观看hd电影国语| 亚洲骚片| 又黄又爽又色的视频| 美女扒开尿口让男人插| 性做久久久久久久久| 91热视频在线观看| 欧美色视频在线观看| 成年人午夜影院| 三上悠亚日韩精品一区在线| 884aa四虎四虎永久播放地址| 中文字幕一区二区三区精彩视频| 波多野结衣欲乱上班族| 色播在线电影| 强行被公侵犯奈奈美| 翁熄交换| 四虎精品在线视频| 天天做天天摸天天爽天天爱| 久久天天躁夜夜躁狠狠85台湾| 天天爱夜夜做| 欧美午夜伦y4480私人影院| 国产精品无码久久久久| 欧美人与动性xxxxx杂性| 美女性生活电影| 美女黄色录像| 丰满肥臀风间由美357在线| 冠希与阿娇实干13分钟视频| 色综合久久综合网观看| 国产精品jvid在线观看| 国精品在亚洲_欧美| 台湾香港澳门三级在线| 老头一天弄了校花4次| 天天5g天天爽永久免费看欧美| 四虎免费永久在线播放| 日韩成人在线网站| 中文字幕亚洲一区二区va在线| 一本伊人| swag合集120部| 最近免费中文字幕大全| 亚洲午夜一区二区三区|