Лучшие вопросы
Таймлайн
Чат
Перспективы
Apache Beam
Из Википедии, свободной энциклопедии
Remove ads
Apache Beam — унифицированная модель программирования с открытым кодом, созданная для описания и выполнения конвейров обработки данных, предназначенных для таких процессов, как ETL, а также для пакетной и многопоточной обработки данных.[2] Конвейры Beam создаются с помощью одного из представленных комплектов для разработки программного обеспечения и выполняются одним из поддерживаемых Beam “исполнителей”, в состав которых входят Apache Flink, Apache Samza, Apache Spark и Google Cloud Dataflow.[3]
.svg){kind=logo}
Remove ads
История
Суммиров вкратце
Перспектива
Apache Beam[3] является одной из реализаций модели потока данных Dataflow компании Google.[4] Она основана на предыдущей работе компании Google связанной с абстракциями распределенных вычислений, в частности на FlumeJava[5] и Millwheel.[6][7]
В 2014 году компания Google выпустила реализацию модели Dataflow в виде комплекта для разработки программного обеспечения с открытым исходным кодом, а также распределенную (в виде одного из сервисов "Oблачной платформы Google") и локальную (не распределенную) среды выполнения.
Хронология
Второстепенные релизы Apache Beam выходят раз в 6 недель.[8]
Remove ads
Ссылки
Wikiwand - on
Seamless Wikipedia browsing. On steroids.
Remove ads