Új Common Data Model-összekötő az Apache Sparkhoz az Azure Synapse Analyticsben és az Azure Databricksben (előzetes verzió)
Közzététel dátuma: szeptember 30, 2020
A Common Data Model (CDM) használatával konzisztens módon lehet az Azure Data Lake Storage-ban (ADLS) tárolt adatok sémáját és szemantikáját leírni. Ez lehetővé teszi, hogy az adatokat CDM-formátumban exportálja olyan alkalmazásokból, mint a Dynamics 365, és hogy egyszerűen leképezze őket más szolgáltatásokban tárolt adatok sémájára és szemantikájára is.
Ma bejelentjük egy új CDM-összekötő elérhetőségét, amely kibővíti a CDM ökoszisztémát azzal, hogy lehetővé teszi az Apache Sparkot használó szolgáltatások számára, hogy a CDM által leírt adatokat CSV vagy Parquet formátumban olvassák és írják. Ez egy olyan adatkeret-absztrakción keresztül történik, amely elérhető a Scalából, a Pythonból és a Spark SQL-ből is. A Spark új CDM-összekötőjéhez semmilyen konfiguráció nem szükséges, és előre telepítve elérhető az Azure Synapse Analyticsben. Telepíthető és használható az Azure Databricksben is.