Nouveau connecteur Common Data Model pour Apache Spark dans Azure Synapse Analytics et Azure Databricks (en version préliminaire)
Date de publication : 30 septembre, 2020
Le CDM (Common Data Model) offre un moyen cohérent de décrire le schéma et la sémantique des données stockées dans Azure Data Lake Storage (ADLS). Cela permet d’exporter les données au format CDM à partir d’applications telles que Dynamics 365 et de les mapper facilement au schéma et à la sémantique des données stockées dans d’autres services.
Nous proposons désormais un nouveau connecteur CDM qui étend l’écosystème CDM en permettant aux services qui utilisent Apache Spark de lire et d’écrire des données CDM au format CSV ou Parquet. Pour ce faire, vous pouvez utiliser une abstraction de tableau de données accessible à partir de Scala, Python ou Spark SQL. Ce nouveau connecteur Spark CDM ne requiert aucune configuration et est préinstallé avec Azure Synapse Analytics. Il peut également être installé et utilisé avec Azure Databricks.