Apache Beam は、高度な統合型プログラミング モデルを提供するため、任意の実行エンジンで実行できるバッチとストリーミングのデータ処理ジョブを実装できます。Apache Apex、Apache Flink、Apache Spark、Google Cloud Dataflow など、分散処理バックエンドと簡単に併用できます。

Apache Beam は、MapReduce、FulumeJava、Mllwheel など、Google の社内テクノロジーを活用して開発されました。Google は 2016 年に Apache Software Foundation にコードを寄贈し、Google 社員は引き続きプロジェクトへの定期的な貢献を続けています。

Apache、Apache Beam、オレンジ色の B ロゴは、米国およびその他の国における Apache Software Foundation の登録商標または商標です。

Apache Beam は、Google の大規模なデータ処理パイプラインの大半を担うために内部で使用される SDK の後継となるオープンソースのサービスです。

関連プロジェクト