Lors de la conférence annuelle organisée par Databricks, qui se déroule actuellement à San Francisco et appelée Data + AI Summit, LakeFlow a été présenté – une solution propriétaire d'ingénierie de données capable de gérer l'acquisition, la transformation et l'orchestration de données et éliminant le besoin d'utiliser des solutions tierces.
Brique de données est l'une des plus grandes entreprises à livrer depuis sa création en 2013 plateforme de traitement de données pour les grandes organisations. Depuis la création de l'organisation, les solutions Databrick s'appuient sur un large écosystème de partenaires utilisés pour fournir des outils de préparation et de chargement des données.
Pendant Sommet Données + IA 2024 présenté à San Francisco LacFlow – une solution d'ingénierie de données propriétaire capable de gérer l'ingestion, la transformation et l'orchestration des données et éliminant le besoin de solutions tierces.
Merci LacFlow utilisateurs Briques de données seront bientôt en mesure de construire leurs pipelines de données et d'extraire des données de bases de données telles que MySQL, PostgreSQL, serveur SQL et Oracleainsi que des applications d'entreprise telles que Force de vente, Dynamique, Point de partage, Journée de travail, NetSuite et Google Analytics.
La décision de changer le modèle opérationnel de Databricks, selon le président de l'entreprise, Ali Ghodsi, résulte d'informations obtenues auprès des clients au cours des deux dernières années.. Les recherches de Databricks montrent qu'ils souhaitent mieux extraire les données des applications et des bases de données SaaS.
Il s'est avéré que la grande majorité des clients Databricks n'ont pas réellement fait appel à des partenaires et ont plutôt créé leurs propres solutions personnalisées pour répondre aux cas extrêmes et aux exigences de sécurité..
Databricks a commencé à explorer les opportunités d'explorer cet espace, ce qui a finalement conduit à l'acquisition d'un service de réplication de données en temps réel. Arcion en novembre de l'année dernière.
Avec LakeFlow, Databricks peut désormais proposer une solution de bout en bout qui permet aux entreprises de récupérer des données provenant d'un large éventail de systèmes, de les transformer et de les ingérer en temps quasi réel, puis de créer à partir de celles-ci des applications prêtes pour la production.
Databricks met en œuvre LakeFlow par étapes. Le premier est LakeFlow Connect, qui sera bientôt disponible en avant-première.
Parallèlement, Databricks continuera d'élargir son écosystème de partenaires.