[Google] Google Composer란?
[Google] Google Composer란?
Cloud Composer
- 클라우드 및 사내 구축형 데이터 센터에 걸쳐있는 파이프 라인을 작성, 예약 및 모니터링 할 수 있는 완벽하게 관리되는 workflow 통합 서비스
- Apache Airflow 오픈 소스 프로젝트를 기반으로 함
- Python 프로그래밍 언어를 사용
- DAG(Directed Acyclic Graph)로 구성되므로 모든 수준의 사용자가 workflow를 쉽게 작성하고 일정을 쉽게 수립 가능
- 원 클릭 배포를 통해 풍부한 커넥터 라이브러리 및 workflow의 여러 그래픽 표현에 즉각적으로 엑세스 가능
- GCP와 깊은 관련이 있어 사용자가 전체 파이프라인을 관리 가능
- BigQueery, Dataflow 등등 많은 제품과의 강력한 통합 기능
- Workflow가 on-premises, 여러 클라우드, GCP내에 있는 모든 경우에도 단일 괄니 도구를 통해서 파이프 라인을 연결 가능
- 인프라 관리의 부담을 줄어들게 해줌
- Apache Airflow를 기반으로 함
- 다양한 플랫폼과의 통합을 제공
출처
댓글
댓글 쓰기