Apache Beam

Apache Beam是一個開源統一編程模型，用於定義和執行數據處理管道，包括ETL、批處理和流（連續）處理。^[2] Beam流水線是使用提供的SDK之一定義的，並在Beam支持的一個運行器（分布式處理後端）中執行，包括Apache Apex（英語：Apache Apex）、Apache Flink、Apache Gearpump（孵化中）、Apache Samza（英語：Apache Samza）、Apache Spark和Google Cloud Dataflow。^[3]

Apache Beam

原作者	Google
開發者	Apache軟件基金會
首次發布	2016年6月15日，​8年前​（2016-06-15）
當前版本	2.64.0（2025年3月31日；穩定版本）[1]
源代碼庫	github.com/apache/beam
編程語言	Java, Python, Go
操作系統	跨平台
許可協議	Apache許可證 2.0
網站	beam.apache.org

它被稱為「大數據的超級API」。^[4]

歷史

Apache Beam^[3]是數據流模型文件的一種實現。^[5]數據流模型基於以前關於Google的分布式處理抽象的工作，特別是FlumeJava^[6]和Millwheel。^[7][8]

Google於2014年發布了數據流模型的開放式SDK，以及在本地（非分布式）和Google雲平台服務中執行數據流的環境。

2016年，Google向Apache軟件基金會捐贈了核心SDK以及本地運行程序的實現，以及用於訪問Google雲平台數據服務的一組IO（數據連接器）。其他公司和社區成員為現有的分布式執行平台提供了運行器，以及新的將Beam Runners與現有數據庫、鍵值存儲和消息系統集成的IO。此外，還提出了新的DSL，以支持Beam模型之上的特定領域需求。

時間線

版本	釋放日期
當前版本： 2.19.0	2020-02-04
舊版本，不再支援： 2.18.0	2020-01-23
舊版本，不再支援： 2.17.0	2020-01-06
舊版本，不再支援： 2.16.0	2019-10-07
舊版本，不再支援： 2.15.0	2019-08-22
舊版本，不再支援： 2.14.0	2019-08-01
舊版本，不再支援： 2.13.0	2019-05-22
舊版本，不再支援： 2.12.0	2019-04-25
舊版本，不再支援： 2.11.0	2019-02-26
舊版本，不再支援： 2.10.0	2019-02-01
舊版本，不再支援： 2.9.0	2018-12-13
舊版本，不再支援： 2.8.0	2018-10-29
舊版本，不再支援： 2.7.0	2018-10-03
舊版本，不再支援： 2.6.0	2018-08-08
舊版本，不再支援： 2.5.0	2018-06-26
舊版本，不再支援： 2.4.0	2018-03-20
舊版本，不再支援： 2.3.0	2018-01-30
舊版本，不再支援： 2.2.0	2017-12-02
舊版本，不再支援： 2.1.0	2017-08-23
舊版本，不再支援： 2.0.0	2017-05-17
舊版本，不再支援： 0.6.0	2017-03-11
舊版本，不再支援： 0.5.0	2017-02-02
舊版本，不再支援： 0.4.0	2016-12-29
舊版本，不再支援： 0.3.0	2016-10-31
舊版本，不再支援： 0.2.0	2016-08-08
舊版本，不再支援： 0.1.0	2016-06-15
格式： 舊版本 舊版本，仍被支援 當前版本 最新的預覽版 未來版本

參見

• Apache軟件基金會的項目列表（英語：List of Apache Software Foundation projects）