Flink社區(qū)風波：比Flink快十倍的技術(shù)真存在嗎？

近期，創(chuàng)業(yè)公司 RisingWave Labs 發(fā)布了開源分布式流處理 SQL 數(shù)據(jù)庫 RisingWave 的 1.0 版本，并同時發(fā)布了該數(shù)據(jù)庫的性能報告預覽版，宣稱他們已經(jīng)取得了相比于 Flink 十倍的性能提升。

RisingWave 聲稱在簡單無狀態(tài)計算中比 Flink 實現(xiàn)性能提升 10-30%，在復雜有狀態(tài)計算中比 Flink 實現(xiàn)性能提升 10-100 倍。其實現(xiàn)巨大性能提升的原因是：拋棄了 JVM 語言，使用了 Rust 高性能編程語言；拋棄了類似 MapReduce 式的中間抽象層，直接對數(shù)據(jù)庫算子進行深度優(yōu)化；存儲感知計算，使用更好的存儲結(jié)構(gòu)便于計算加速。

上周，阿里 Flink 團隊部分成員發(fā)表文章質(zhì)疑了該性能評測報告，認為 RisingWave 的評測報告非常具有誤導性。阿里 Flink 團隊成員也自己進行了一次性能測試，在更正了 Flink 參數(shù)設(shè)置的條件下，得出結(jié)果為：“RisingWave 有兩成的 query 無法支持，在性能上 Flink 全面大幅領(lǐng)先 RisingWave，整體性能快 60%，部分 stateful query 有 20 倍的性能優(yōu)勢。”也就是說，RisingWave 沒有達到比 Flink 快 10 倍的性能提升，他們認為該公司的行為涉嫌“虛假營銷”。

今天，RisingWave 指出，兩份報告的結(jié)果差異是由環(huán)境差異造成：在 Flink 團隊成員的測試環(huán)境中，“Flink 使用了三倍于我們測試環(huán)境的 CPU，六倍于我們測試環(huán)境的內(nèi)存。同時我們的測試中，我們?yōu)?Flink 配置了 EBS，他們使用了性能更高的 local NVMe，而 RisingWave 在這個測試中不依賴文件系統(tǒng)?！?/p>

那業(yè)界到底存在不存在比 Flink 快 10 倍的技術(shù)？RisingWave 創(chuàng)始人吳英駿 指出，其實早在 3 年前，F(xiàn)link 的原創(chuàng)團隊 TU Berlin 數(shù)據(jù)庫組便拋棄 Flink 從頭開發(fā)了新一代流處理引擎 NebulaStream，并實現(xiàn)了 10-100 倍的提升。