google cloud composer

Google Cloud Composer : un nouvel outil de Data Orchestration

Composer est un nouvel outil de Data Orchestration conçu par pour permettre aux utilisateurs de sa plateforme de mieux utiliser conjointement ses différentes fonctionnalités. Il s’agit d’une solution basée sur Airflow.

Depuis maintenant plusieurs années, Google Cloud met tout en oeuvre pour prendre des parts du marché du Cloud public à Amazon Web Services. La firme a mis au point de nombreux outils et services destinés aux entreprises. Toutefois, jusqu’à présent, le nuage Google manquait d’une solution permettant d’harmoniser et de lier ces outils.

Afin de remédier à ce problème, Google dévoile aujourd’hui le Cloud Composer. Ce nouvel outil de Data Orchestration est basé sur Apache Airflow, un projet open-source focalisé sur les workflows. Airflow a été choisi car ses scripts sont en Python, ce qui facilite sa prise en main. Selon Google, une heure ou deux suffisent à maîtriser l’outil.

Google Cloud Composer permet de lier les différents outils de la Google Cloud Platform

google cloud platform apache airflow

En outre, Google souhaitait impérativement basé son produit sur un projet open source dans un souci de connectivité. Airflow permet d’orchestrer efficacement les environnements cloud hybrides et multi-cloud.

Actuellement en version beta, Cloud Composer regroupe des fonctionnalités permettant de déployer facilement Airflow. L’outil est compatible avec Google BigQuery, Cloud Dataflow, Cloud Dataproc, Cloud Datastore, Cloud Storage, and Cloud Pub/Sub. Ainsi, il est par exemple possible de lancer une requête avec BigQuery et d’exporter les résultats vers Cloud Storage. Cette nouvelle solution devrait permettre à Google de poursuivre sa conquête du Cloud public.

Restez à la pointe de l'information avec LEBIGDATA.FR !

Cliquez pour commenter

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *

Newsletter

La newsletter IA du futur

Rejoins nos 100 000 passionnés et experts et reçois en avant-première les dernières tendances de l’intelligence artificielle🔥