아파치 빔

Apache Beam
아파치 빔
Beam-logo-full-color-name-right-200-autocrop.png
원저작자구글
개발자Apache 소프트웨어 재단
초기 릴리즈2016년 6월 15일, 6년 전(2016-06-15)
안정된 릴리스2.30.0 (2021년 6월 9일, 13개월 전 (2021-06-09)[1] [±]
저장소빔 저장소
기입처Java, Python, Go
운영 체제크로스 플랫폼
면허증.Apache 라이센스 2.0
웹 사이트beam.apache.org

Apache Beam은 ETL, 배치 및 스트림([2]연속) 처리를 포함한 데이터 처리 파이프라인을 정의 및 실행하기 위한 오픈 소스 통합 프로그래밍 모델입니다.빔 파이프라인은 제공된 SDK 중 하나를 사용하여 정의되며 Apache Flink, Apache Samza, Apache Spark 및 Google Cloud Dataflow를 [3]포함하여 빔이 지원하는 주자 중 하나(분산 처리 백엔드)에서 실행됩니다.

역사

Apache[3] Beam은 Dataflow 모델 [4]페이퍼의 구현 중 하나입니다.Dataflow 모델은 Google, 특히 FlumeJava와[5] Millwheel의 [6][7]분산 프로세싱 추상화에 관한 이전 작업을 기반으로 합니다.

Google은 2014년에 Dataflow 모델의 개방형 SDK 구현과 Dataflow를 Google Cloud Platform 서비스뿐만 아니라 로컬(비분산)에서 실행할 수 있는 환경을 공개했습니다.

타임라인

Apache Beam은 [8]6주마다 마이너 릴리즈를 만듭니다.

버전 발매일
현재 안정적인 버전: 2.40.0 2022-06-27
이전 버전, 유지 보수 불필요: 2.39.0 2022-05-25
이전 버전, 유지 보수 불필요: 2.38.0 2022-04-20
이전 버전, 유지 보수 불필요: 2.37.0 2022-03-04
이전 버전, 유지 보수 불필요: 2.36.0 2022-02-07
이전 버전, 유지 보수 불필요: 2.35.0 2021-12-29
이전 버전, 유지 보수 불필요: 2.34.0 2021-11-11
이전 버전, 유지 보수 불필요: 2.33.0 2021-10-07
이전 버전, 유지 보수 불필요: 2.32.0 2021-08-25
이전 버전, 유지 보수 불필요: 2.31.0 2021-07-08
이전 버전, 유지 보수 불필요: 2.30.0 2021-06-09
이전 버전, 더 이상 유지 보수되지 않음: 2.29.0 2021-04-27
이전 버전, 더 이상 유지 보수되지 않음: 2.28.0 2021-02-22
이전 버전, 유지 보수 불필요: 2.27.0 2021-01-08
이전 버전, 더 이상 유지 보수되지 않음: 2.26.0 2020-12-11
이전 버전, 더 이상 유지 보수되지 않음: 2.25.0 2020-10-23
이전 버전, 유지 보수 불필요: 2.24.0 2020-09-18
이전 버전, 더 이상 유지 관리되지 않음: 2.23.0 2020-07-29
이전 버전, 더 이상 유지 보수되지 않음: 2.22.0 2020-06-08
이전 버전, 더 이상 유지 보수되지 않음: 2.21.0 2020-05-27
이전 버전, 유지 보수 불필요: 2.20.0 2020-04-15
이전 버전, 더 이상 유지 보수되지 않음: 2.19.0 2020-02-04
이전 버전, 더 이상 유지 보수되지 않음: 2.18.0 2020-01-23
이전 버전, 유지 보수 불필요: 2.17.0 2020-01-06
이전 버전, 유지 보수 불필요: 2.16.0 2019-10-07
이전 버전, 유지 보수 불필요: 2.15.0 2019-08-22
이전 버전, 유지 보수 불필요: 2.14.0 2019-08-01
이전 버전, 유지 보수 불필요: 2.13.0 2019-05-22
이전 버전, 더 이상 유지 보수되지 않음: 2.12.0 2019-04-25
이전 버전, 유지 보수 불필요: 2.11.0 2019-02-26
이전 버전, 유지 보수 불필요: 2.10.0 2019-02-01
이전 버전, 유지 보수 불필요: 2.9.0 2018-12-13
이전 버전, 유지 보수 불필요: 2.8.0 2018-10-29
이전 버전, 유지 보수 불필요: 2.7.0 (LTS) 2018-10-03
이전 버전, 유지 보수 불필요: 2.6.0 2018-08-08
이전 버전, 유지 보수 불필요: 2.5.0 2018-06-26
이전 버전, 유지 보수 불필요: 2.4.0 2018-03-20
이전 버전, 유지 보수 불필요: 2.3.0 2018-01-30
이전 버전, 유지 보수 불필요: 2.2.0 2017-12-02
이전 버전, 유지 보수 불필요: 2.1.0 2017-08-23
이전 버전, 유지 보수 불필요: 2.0.0 2017-05-17
이전 버전, 더 이상 유지 보수되지 않음: 0 2017-03-11
이전 버전, 더 이상 유지 보수되지 않음: 2017-02-02
이전 버전, 더 이상 유지 보수되지 않음: 0 2016-12-29
이전 버전, 더 이상 유지 보수되지 않음: 2016-10-31
이전 버전, 유지 보수 불필요: 0.2.0 2016-08-08
이전 버전, 유지 보수 불필요: 0.1.0 2016-06-15
범례:
구버전
이전 버전, 아직 유지 관리됨
최신 버전
최신 프리뷰 버전
향후 출시

「 」를 참조해 주세요.

레퍼런스

  1. ^ "Blogs". beam.apache.org. The Apache Software Foundation. Retrieved 2021-06-09.
  2. ^ Woodie, Alex (22 April 2016). "Apache Beam's Ambitious Goal: Unify Big Data Development". Datanami. Retrieved 4 August 2016.
  3. ^ a b "Cloud Dataflow - Batch & Stream Data Processing".
  4. ^ Akidau, Tyler; Schmidt, Eric; Whittle, Sam; Bradshaw, Robert; Chambers, Craig; Chernyak, Slava; Fernández-Moctezuma, Rafael J.; Lax, Reuven; McVeety, Sam; Mills, Daniel; Perry, Frances (1 August 2015). "The dataflow model" (PDF). Proceedings of the VLDB Endowment. 8 (12): 1792–1803. doi:10.14778/2824032.2824076. Retrieved 4 August 2016.
  5. ^ Chambers, Craig; Raniwala, Ashish; Perry, Frances; Adams, Stephen; Henry, Robert R.; Bradshaw, Robert; Weizenbaum, Nathan (1 January 2010). "FlumeJava: Easy, Efficient Data-parallel Pipelines" (PDF). Proceedings of the 31st ACM SIGPLAN Conference on Programming Language Design and Implementation. ACM: 363–375. doi:10.1145/1806596.1806638. S2CID 14888571. Archived from the original (PDF) on 23 September 2016. Retrieved 4 August 2016.
  6. ^ Akidau, Tyler; Whittle, Sam; Balikov, Alex; Bekiroğlu, Kaya; Chernyak, Slava; Haberman, Josh; Lax, Reuven; McVeety, Sam; Mills, Daniel; Nordstrom, Paul (27 August 2013). "MillWheel" (PDF). Proceedings of the VLDB Endowment. 6 (11): 1033–1044. doi:10.14778/2536222.2536229. Archived from the original (PDF) on 1 February 2016. Retrieved 4 August 2016.
  7. ^ Pointer, Ian. "Apache Beam wants to be uber-API for big data". InfoWorld. Retrieved 4 August 2016.
  8. ^ "Policies". beam.apache.org. Retrieved 21 April 2022.