Nuevo conector de Common Data Model para Apache Spark en Azure Synapse Analytics y Azure Databricks (en versión preliminar)
Fecha de publicación: 30 septiembre, 2020
El modelo Common Data Model (CDM) proporciona una manera coherente de describir el esquema y la semántica de los datos almacenados en Azure Data Lake Storage (ADLS). Esto permite que los datos se exporten en formato CDM desde aplicaciones como Dynamics 365 y se adapten fácilmente al esquema y a la semántica de los datos almacenados en otros servicios.
Hoy anunciamos un nuevo conector de CDM que extiende el ecosistema de CDM al permitir que los servicios que usan Apache Spark ahora puedan leer y escribir datos descritos con el modelo CDM con los formatos CSV o Parquet. Para ello, se utiliza una abstracción de trama de datos a la que se puede acceder desde Scala, Python o Spark SQL. Este nuevo conector de CDM para Spark no requiere configuración y se instala con Azure Synapse Analytics. También se puede instalar y usar con Azure Databricks.