網(wǎng)站首頁 科技 > 正文
目前大家應(yīng)該是對flink和spark對比比較感興趣的，所以今天好房網(wǎng)小編CC就來為大家整理了一些關(guān)于flink和spark對比方面的相關(guān)知識(shí)來分享給大家，希望大家會(huì)喜歡哦。
技術(shù)理念不同：Spark的技術(shù)理念是使用微批來模擬流的計(jì)算，基于Micro-batch,數(shù)據(jù)流以時(shí)間為單位被切分為一個(gè)個(gè)批次，通過分布式數(shù)據(jù)集RDD進(jìn)行批量處理，是一種偽實(shí)時(shí)。而Flink是基于事件驅(qū)動(dòng)，它是一個(gè)面向流的處理框架， Flink基于每個(gè)事件一行一行地流式處理，是真正的流式計(jì)算。 另外他也可以基于流來模擬批進(jìn)行計(jì)算實(shí)現(xiàn)批處理，在技術(shù)上具有更好的擴(kuò)展性。
時(shí)間機(jī)制：SparkStreaming只支持處理時(shí)間， 折中地使用processing time來近似地實(shí)現(xiàn)event time相關(guān)的業(yè)務(wù)。使用processing time模擬event time必然會(huì)產(chǎn)生一些誤差， 特別是在產(chǎn)生數(shù)據(jù)堆積的時(shí)候，誤差則更明顯，甚至導(dǎo)致計(jì)算結(jié)果不可用，Structured streaming 支持處理時(shí)間和事件時(shí)間，同時(shí)支持 watermark 機(jī)制處理滯后數(shù)據(jù)Flink 支持三種時(shí)間機(jī)制：事件時(shí)間、注入時(shí)間、處理時(shí)間、同時(shí)支持 watermark 機(jī)制處理遲到的數(shù)據(jù)，說明Flink在處理亂序大實(shí)時(shí)數(shù)據(jù)的時(shí)候，優(yōu)勢比較大。
版權(quán)說明： 本文由用戶上傳，如有侵權(quán)請聯(lián)系刪除！
猜你喜歡：
- 2022-09-20 心境豁達(dá)恬淡的詩句有哪些呢（心境豁達(dá)恬淡的詩句有哪些）
- 2022-09-20 下雨前的征兆動(dòng)物（下雨前動(dòng)物有哪些征兆 – 糗問）
- 2022-09-20 便秘按摩哪里馬上見效快（便秘按摩哪里馬上見效）
- 2022-09-20 經(jīng)心的近義詞是什么呀（經(jīng)意的近義詞是什么呢）
- 2022-09-20 芡實(shí)怎么熬粥好吃（芡實(shí)和什么搭配熬粥好）
- 2022-09-20 0.44平方千米是多大（0.44平方千米有多大）
- 2022-09-20 北京奧運(yùn)會(huì)會(huì)徽中國印是什么?。ū本W運(yùn)會(huì)徽上中國印是什么）
- 2022-09-20 qq空間訪客數(shù)量是什么意思（QQ空間訪問量2000是什么概念）
最新文章：
- 2023-06-30 小龍蝦清洗怎么快又干凈（龍蝦怎么快速清洗 清洗龍蝦的方法）
- 2023-06-30 簡約現(xiàn)代的陽臺(tái)吊頂裝修用材料有哪些（休閑陽臺(tái)吊頂材料有哪些）
- 2023-06-30 蘑菇怎么清洗泥沙（蘑菇怎么清洗）
- 2023-06-30 王羲之的書法對聯(lián)（王羲之最美10幅對聯(lián)）
- 2023-06-30 人類有信息素味道嗎（人類存在信息素嗎）
- 2023-06-30 對老師的感謝語20字（對老師的感謝語）
- 2023-06-30 食品安全知識(shí)內(nèi)容培訓(xùn)（食品安全知識(shí)內(nèi)容）
- 2023-06-30 五一勞動(dòng)節(jié)文案幽默（五一勞動(dòng)節(jié)文案）
- 2023-06-30 合作共贏精彩語句八個(gè)字（簡短哀悼語八個(gè)字）
- 2023-06-30 中國的唐代建筑哪去了（中國唯一唐朝建筑）
- 2023-06-30 生死恨由京劇是主演（生死恨由誰主演京劇名家）
- 2023-06-30 了解戰(zhàn)國歷史看什么書（了解歷史看什么書）
- 2023-06-30 七創(chuàng)社出了哪些游戲（七創(chuàng)社還有什么動(dòng)畫片）
- 2023-06-30 流浪地球講述的是什么故事（流浪地球講了什么故事）
- 2023-06-30 漂亮的主婦和健身教練是第幾集（漂亮主婦在家和教練是哪集）
- 2023-06-30 張仲景的傷寒雜病論并注明了什么（張仲景的傷寒雜病論并著述了什么）