Novo conector do Common Data Model para o Apache Spark no Azure Synapse Analytics e no Azure Databricks (em pré-visualização)
Data de publicação: 30 setembro, 2020
O Common Data Model (CDM) dá-lhe uma forma consistente de descrever o esquema e a semântica dos dados armazenados no Azure Data Lake Storage (ADLS). Permite-lhe exportar dados no formato CDM a partir de aplicações como o Dynamics 365 e mapear facilmente esses dados para o esquema e a semântica dos dados armazenados noutros serviços.
Hoje, estamos a anunciar um novo conector do CDM que expande o ecossistema do CDM ao ativar serviços que utilizam o Apache Spark para agora ler e escrever dados descritos pelo CDM no formato CSV ou Parquet. Este processo é feito através de uma abstração de dataframe a que pode aceder a partir do Scala, Python ou Spark SQL. Este novo conector do CDM para o Spark não requer qualquer configuração e vem pré-instalado com o Azure Synapse Analytics. Também pode ser instalado e utilizado com o Azure Databricks.