Apache Celeborn
管理分散式運算的 shuffle 資料
這是什麼
Celeborn 將 shuffle 資料移到獨立服務,提供分散式運算引擎可使用的遠端資料交換層。
適合怎麼用
運算節點常變動的環境,可查看 Spark 與 Flink 整合文件,理解資料與節點的分工。
管理分散式運算的 shuffle 資料
Celeborn 將 shuffle 資料移到獨立服務,提供分散式運算引擎可使用的遠端資料交換層。
運算節點常變動的環境,可查看 Spark 與 Flink 整合文件,理解資料與節點的分工。