Ny Common Data Model-connector til Apache Spark i Azure Synapse Analytics og Azure Databricks (i prøveversion)
Dato for publicering: 30 september, 2020
Common Data Model (CDM) giver en ensartet måde at beskrive skemaet og semantikken i forbindelse med data, der er lagret i ADLS (Azure Data Lake Storage). Dette gør det muligt at eksportere data i CDM-format fra programmer som Dynamics 365 og nemt knytte dem til skemaet og semantikken for data, der er lagret i andre tjenester.
I dag lancerer vi en ny CDM-connector, der udvider CDM-økosystemet ved at aktivere tjenester, der bruger Apache Spark til nu at læse og skrive CDM-beskrevne data i CSV- eller Parquet-format. Dette gøres via en datarammeabstraktion, som du kan få adgang til fra Scala, Python eller Spark SQL. Denne nye spark CDM-connector kræver ingen konfiguration, og den er forudinstalleret med Azure Synapse Analytics. Den kan også installeres og bruges sammen med Azure Databricks.