Flink

Flink是一個批處理和流處理結(jié)合的統(tǒng)一計算框架,其核心是一個提供了數(shù)據(jù)分發(fā)以及并行化計算的流數(shù)據(jù)處理引擎。它的最大亮點是流處理,是業(yè)界最頂級的開源流處理引擎。

Flink最適合的應用場景是低時延的數(shù)據(jù)處理(Data Processing)場景:高并發(fā)pipeline處理數(shù)據(jù),時延毫秒級,且兼具可靠性。Flink提供高吞吐量、低延遲的流數(shù)據(jù)引擎以及對事件-時間處理和狀態(tài)管理的支持。Flink應用程序在發(fā)生機器故障時具有容錯能力,并且支持exactly-once語義。程序可以用Java、Scala、Python和SQL等語言編寫,并自動編譯和優(yōu)化到在集群或云環(huán)境中運行的數(shù)據(jù)流程序。

鏈接:https://support.huaweicloud.com/productdesc-mrs/mrs_08_003401.html

華為云推薦:

MapReduce服務 https://support.huaweicloud.com/mrs/index.html