text: Apache Beam是一個開源統一程式設計模型，用於定義和執行資料處理管道，包括ETL、批處理和流、、Apache Spark和Google Cloud Dataflow。它被稱為“大資料的超級API”。歷史.Apache Beam是資料流模型檔案的一種實現。資料流模型基於以前關於Google的分散式處理抽象的工作，特別是FlumeJava和Millwheel。Google於2014年釋出了資料流模型的開放式SDK，以及在本地和Google雲平臺服務中執行資料流的環境。2016年，Google向Apache軟體基金會捐贈了核心SDK以及本地執行程式的實現，以及用於訪問Google雲平臺數據服務的一組IO。其他公司和社群成員為現有的分散式執行平臺提供了執行器，以及新的將Beam Runners與現有資料庫、鍵值儲存和訊息系統整合的IO。此外，還提出了新的DSL，以支援Beam模型之上的特定領域需求。
metadata: erhwenkuo/wikipedia-zhtw
metadata: Apache Beam
metadata: https://zh.wikipedia.org/wiki?curid=6404908