Partage de données

Quels sont les types de partage de données ?

On distingue différents types de partage de données : il peut se faire au sein de l'organisation ou avec l'extérieur, en tête-à-tête ou avec plusieurs destinataires, et il peut être public ou privé. Les entreprises peuvent utiliser des places de marché de données publiques ou privées pour améliorer leur partage de données et leur collaboration, ainsi que des salles blanches de données respectueuses de la vie privée pour des données sensibles, telles que les informations personnellement identifiables (PII).

Quels sont les défis du partage de données ?

Le partage de données est essentiel pour les entreprises modernes, mais il comporte son lot de difficultés. La plus grande d'entre elles est naturellement la sécurité. Pour partager uniquement les bonnes données avec les bonnes personnes, dans le contexte approprié, il faut des politiques stratégiques, des outils efficaces et des processus clairement définis et rigoureusement appliqués. L'autre défi majeur est celui de la gouvernance des données, qui vise à garantir la conformité de l'utilisation des données des réglementations spécifiques. Il faut également tenir compte des problèmes techniques et structurels de gestion des données – multiplicité des systèmes, solutions propriétaires ou héritées, etc. – qui sont autant d'obstacles potentiels au partage efficace et performant des données.

Quels sont les avantages du partage de données dans une organisation ?

Le partage de données est crucial pour l'évolution du modèle d'entreprise data-driven. D'après les prévisions de Gartner, en 2024, les organisations qui encouragent le partage de données devanceront leurs homologues dans la plupart des indicateurs de valeur commerciale. Le partage de données élimine les silos : c'est donc un puissant atout pour l'efficacité, la transparence et la collaboration, que ce soit au sein de l'organisation ou avec des partenaires. Il permet également aux organisations de produire plus rapidement de nouveaux insights, ce qui contribue à améliorer les performances. Enfin, le partage de données ouvre de nouvelles opportunités de revenus grâce à la commercialisation de nouveaux produits et services de données.

Technologies traditionnelles de partage de données

Les technologies traditionnelles telles que SFTP (protocole de transfert de fichiers sécurisé), l'email et les API (interface de programmation d'application) permettent de développer en interne des solutions indépendantes des fournisseurs et opérationnelles sur site comme dans le cloud. Outre qu'elles coûtent souvent cher à gérer et à maintenir, ces solutions sont de plus en plus difficiles à sécuriser et à encadrer dans le contexte des normes modernes en matière de données. Pour ces raisons, elles peuvent entraver et ralentir le partage de données. Surtout, elles sont rarement capables d'évoluer pour accueillir de grands datasets.

Le stockage d'objets cloud convient bien au cloud en raison de son évolutivité, qui permet de faire face à une croissance illimitée des données. Il est facile d'accès et économique, mais il présente quelques inconvénients. Par exemple, les destinataires des données doivent être sur le même cloud, et les processus de sécurité et de gouvernance peuvent être complexes. Peu pratique, le partage de grands volumes de données via un stockage cloud est également long et presque impossible à déployer à grande échelle.

Offres commerciales ou à source fermée de partage de données

Les produits de fournisseurs tels qu'Oracle, Amazon Redshift ou Snowflake intègrent des solutions de partage de données. Ces solutions sont très pratiques et offrent aux utilisateurs un moyen simple de partager des données avec toute personne utilisant la même plateforme. Il reste toutefois impossible de partager des données avec les utilisateurs de solutions concurrentes et l'évolutivité est souvent limitée. Soulignons également que les données doivent être chargées sur la plateforme via un processus d'extraction, transformation et chargement (ETL), qui crée des copies de datasets. Toutes ces restrictions ajoutent à la complexité. Elles entraînent aussi des problèmes de contrôle de version et augmentent le coût du partage avec des destinataires basés sur d'autres plateformes cloud.

Solutions de partage de données modernes et open source

Dans le contexte actuel des infrastructures souvent complexes et multi-plateformes, une solution open source de partage de données apporte une flexibilité très intéressante. Les solutions open source sont différentes des produits commerciaux. De plus, elles offrent un certain nombre d’avantages supplémentaires, tels que les intégrations développées par la communauté avec des frameworks de traitement de données populaires et open source. Quant aux protocoles ouverts, ils facilitent l'intégration de clients commerciaux, et en particulier des outils de BI.

Data marketplaces

Les data marketplaces, ou marchés de données, facilitent le partage et la monétisation des données. Ils sont à ce titre des outils essentiels pour le partage des données et la collaboration. Ces marketplaces peuvent prendre différentes formes :

• Marketplaces internes, pour partager des données au sein d'une entreprise
• Marketplaces privés, pour échanger des données avec des partenaires de confiance
• Marketplaces publics, pour mettre en relation les fournisseurs et les consommateurs de données

Les data marketplaces publics offrent aux participants la possibilité d'acheter et de vendre des données et des services connexes dans un environnement sécurisé qui offre des garanties de qualité et de cohérence en établissant un lien direct avec les fournisseurs de données. Les entreprises peuvent utiliser ces marketplaces pour acquérir des données tierces afin d'enrichir leurs propres datasets, mais aussi commercialiser de nouveaux produits et services de données.

Salles blanches

Les salles blanches offrent aux entreprises un environnement sécurisé et encadré pour collaborer facilement avec des clients et des partenaires, quel que soit le cloud, avec des normes de confidentialité rigoureuses. Dans une salle blanche, les participants peuvent apporter leurs propres données et les analyser sans risquer d'exposer des informations sensibles aux autres personnes présentes. Ils conservent un contrôle total sur leurs données et peuvent autoriser ou non les autres participants à effectuer des analyses, sans exposer de données sensibles ou d'IPI.

Delta Sharing

Delta Sharing est le premier protocole ouvert pour le partage sécurisé des données. Il permet aux organisations d’échanger facilement des données avec d’autres parties prenantes, quelles que soient les plateformes informatiques qu’elles utilisent.

• Partager directement des données « live » : partagez facilement des données existantes et des données « live » sur Delta Lake sans avoir à les copier sur un autre système.
• Prise en charge de divers clients : les destinataires des données peuvent se connecter directement à Delta Sharing à partir de Pandas, Apache Spark™, Rust et d’autres systèmes sans avoir à déployer au préalable une plateforme de calcul spécifique. Réduisez les frictions pour que vos données parviennent rapidement à vos utilisateurs.
• Sécurité et gouvernance — ​​Delta Sharing vous permet de gouverner, de suivre et d'auditer les accès aux données.
• Évolutivité : partagez à grande échelle des datasets de manière fiable et efficace en utilisant les systèmes de stockage cloud tels que S3, ADLS et GCS.

Delta Sharing sur Databricks

Databricks s’intègre à Delta Sharing en mode natif dans Unity Catalog, offrant une expérience simplifiée pour le partage des données au sein d’une organisation et entre différentes entreprises. Les destinataires n'ont pas besoin d'utiliser la plateforme Databricks, ni même quelque cloud que ce soit.

Delta Sharing offre plusieurs avantages clés :

• Partage ouvert multiplateforme
• Partage de données en direct sans réplication
• Gouvernance centralisée
• Possibilité de partager des produits de données – modèles d'IA, tableaux de bord, notebooks, etc. – avec une grande flexibilité
• Réduisez les coûts
• Réduction du délai de rentabilisation

Delta Sharing est un écosystème ouvert de partenaires open source et commerciaux toujours plus nombreux. Databricks a récemment élargi ses partenariats Delta Sharing à Cloudflare, Dell, Oracle et Twilio.

En savoir plus sur le partage de données sur Databricks

Delta Sharing offre un moyen simple et sécurisé de partager des données en direct sur plusieurs plateformes, clouds et régions. Delta Sharing transforme déjà le partage de données pour les entreprises d'un large éventail de secteurs. Lancez-vous aujourd'hui avec Databricks Delta Sharing.