久久精品国产亚洲高清|精品日韩中文乱码在线|亚洲va中文字幕无码久|伊人久久综合狼伊人久久|亚洲不卡av不卡一区二区|精品久久久久久久蜜臀AV|国产精品19久久久久久不卡|国产男女猛烈视频在线观看麻豆

千鋒教育-做有情懷、有良心、有品質(zhì)的職業(yè)教育機(jī)構(gòu)

手機(jī)站
千鋒教育

千鋒學(xué)習(xí)站 | 隨時(shí)隨地免費(fèi)學(xué)

千鋒教育

掃一掃進(jìn)入千鋒手機(jī)站

領(lǐng)取全套視頻
千鋒教育

關(guān)注千鋒學(xué)習(xí)站小程序
隨時(shí)隨地免費(fèi)學(xué)習(xí)課程

當(dāng)前位置:首頁  >  技術(shù)干貨  > 大數(shù)據(jù)面試題:經(jīng)典面試題答疑(十)

大數(shù)據(jù)面試題:經(jīng)典面試題答疑(十)

來源:千鋒教育
發(fā)布人:syq
時(shí)間: 2022-06-09 10:41:00 1654742460

  1.延遲數(shù)據(jù)(allowedLateness)

  答案:延長窗口銷毀

  窗口watermark和allowedLateness之后依然遲到的流數(shù)據(jù),也是通過.sideOutputLateData(outputTag)和result.getSideOutput(outputTag)的側(cè)輸出流方式輸出的,拿到這一部分?jǐn)?shù)據(jù)后用戶可以自己處理。

wps4nPq4V

  2.什么是barrier不對齊?

  答案:當(dāng)還有其他輸入流的barrier還沒有到達(dá)時(shí),會把已到達(dá)的barrier之后的數(shù)據(jù)1、2、3擱置在緩沖區(qū),等待其他流的barrier到達(dá)后才能處理。

  barrier不對齊就是指當(dāng)還有其他流的barrier還沒到達(dá)時(shí),為了不影響性能,也不用理會,直接處理barrier之后的數(shù)據(jù)。等到所有流的barrier的都到達(dá)后,就可以對該Operator做CheckPoint了。

  3.為什么要進(jìn)行barrier對齊?不對齊到底行不行?

  答案:Exactly Once時(shí)必須barrier對齊,如果barrier不對齊就變成了At Least Once;

  CheckPoint的目的就是為了保存快照,如果不對齊,那么在第n次快照之前,已經(jīng)處理了一些n快照之后對應(yīng)的offset之后的數(shù)據(jù),當(dāng)程序從n次恢復(fù)任務(wù)時(shí),n次快照對應(yīng)的offset之后的數(shù)據(jù)還會被處理一次,所以就出現(xiàn)了重復(fù)消費(fèi)。如果聽不懂沒關(guān)系,后面有案例讓您懂。

  4.相關(guān)參數(shù)配置

  答案:

wpsALVdBd

  5.Flink是如何保證Exactly-once語義的?

  答案:

  1)事務(wù)寫(有延遲):兩階段提交(Two-Phase-Commit,2PC),預(yù)寫日志(Write-Ahead-Log,WAL)

  兩階段提交:如果外部系統(tǒng)自身就支持事務(wù)(比如Kafka),可以使用2PC方式,提供百分百端到端的Exactly-Once。

  WAL:WAL方式通用性更強(qiáng),適合幾乎所有外部系統(tǒng),但也不能提供百分百端到端的Exactly-Once;

  2)冪等性

  多次寫入相同數(shù)據(jù),結(jié)果是一致的的(redis,hbase等)

  更多關(guān)于大數(shù)據(jù)培訓(xùn)的問題,歡迎咨詢千鋒教育在線名師,如果想要了解我們的師資、課程、項(xiàng)目實(shí)操的話可以點(diǎn)擊咨詢課程顧問,獲取試聽資格來試聽我們的課程,在線零距離接觸千鋒教育大咖名師,讓你輕松從入門到精通。

tags:
聲明:本站稿件版權(quán)均屬千鋒教育所有,未經(jīng)許可不得擅自轉(zhuǎn)載。
10年以上業(yè)內(nèi)強(qiáng)師集結(jié),手把手帶你蛻變精英
請您保持通訊暢通,專屬學(xué)習(xí)老師24小時(shí)內(nèi)將與您1V1溝通
免費(fèi)領(lǐng)取
今日已有369人領(lǐng)取成功
劉同學(xué) 138****2860 剛剛成功領(lǐng)取
王同學(xué) 131****2015 剛剛成功領(lǐng)取
張同學(xué) 133****4652 剛剛成功領(lǐng)取
李同學(xué) 135****8607 剛剛成功領(lǐng)取
楊同學(xué) 132****5667 剛剛成功領(lǐng)取
岳同學(xué) 134****6652 剛剛成功領(lǐng)取
梁同學(xué) 157****2950 剛剛成功領(lǐng)取
劉同學(xué) 189****1015 剛剛成功領(lǐng)取
張同學(xué) 155****4678 剛剛成功領(lǐng)取
鄒同學(xué) 139****2907 剛剛成功領(lǐng)取
董同學(xué) 138****2867 剛剛成功領(lǐng)取
周同學(xué) 136****3602 剛剛成功領(lǐng)取
相關(guān)推薦HOT
藍(lán)v抖音小店怎么開通店鋪

藍(lán)v抖音小店是一個(gè)非常熱門的電商平臺,它可以讓賣家在抖音上開設(shè)自己的店鋪,從而出售自己的商品。隨著抖音的不斷發(fā)展壯大,越來越多的賣家希...詳情>>

2023-10-08 14:51:53
抖音小店怎么更改類目名稱

抖音小店是現(xiàn)在非?;馃岬囊环N網(wǎng)店形態(tài),許多小生意也從中獲得了收益。但是隨著經(jīng)營時(shí)間的增長,小店也需要對自己的類目名稱進(jìn)行更改,因?yàn)檫@可...詳情>>

2023-10-08 14:46:50
抖音小店怎么合作賣貨

抖音小店作為一種新型的電商形式,近年來在國內(nèi)市場上逐漸火熱起來,成為了許多年輕人賺取收入的途徑之一。因?yàn)槎兑糇鳛楫?dāng)前最流行的短視頻平臺...詳情>>

2023-10-08 14:35:49
抖音小店運(yùn)營和天貓區(qū)別是什么呢

隨著社交媒體的廣泛應(yīng)用,抖音小店開始走進(jìn)人們的生活,成為越來越多人的購物選擇之一。而天貓作為國內(nèi)最具影響力的電商平臺之一,是許多電商從...詳情>>

2023-10-08 14:23:10
抖音小店在哪個(gè)界面進(jìn)入店鋪頁面

抖音小店,是指在抖音平臺上開設(shè)的個(gè)人或企業(yè)店鋪。隨著抖音用戶數(shù)的不斷增加,抖音小店越來越受到用戶的歡迎和喜愛。但是,如何進(jìn)入抖音小店的...詳情>>

2023-10-08 14:21:20