Apache Beam
데이터 처리 파이프라인을 정의하고 실행하기 위한 통합 모델
Apache Beam은 고급 통합 프로그래밍 모델을 제공하므로 모든 실행 엔진에서 실행할 수 있는 일괄 및 스트리밍 데이터 처리 작업을 구현할 수 있습니다. 다른 분산 처리 백엔드 중에서 Apache Apex, Apache Flink, Apache Spark, Google Cloud Dataflow와 함께 간편하게 사용할 수 있습니다.
Apache Beam은 맵리듀스, FlumeJava 및 Millwheel을 비롯한 여러 Google 내부 기술을 바탕으로 개발되었습니다. Google은 2016년에 이 코드를 Apache Software Foundation에 기부했으며, Google 직원들은 계속해서 프로젝트에 정기적으로 기여하고 있습니다.
Apache, Apache Beam, 주황색 B 문자 로고는 미국 및/또는 다른 국가에서 사용되는 Apache Software Foundation의 등록 상표 또는 상표입니다.
Google의 Apache Beam 사용 방식
Apache Beam은 Google의 대규모 데이터 처리 파이프라인 대부분을 지원하는 데 내부적으로 사용되는 SDK의 오픈소스 후속 버전입니다.
-
Repo
-
라이선스
-
카테고리
-
언어