Az Apache Spark 2.4 és az Apache Kafka 2.1 támogatása az Azure HDInsighton
Közzététel dátuma: július 08, 2019
Az Azure HDInsight mostantól támogatja az Apache Spark 2.4-et és az Apache Kafka 2.1-et. A fürtök létrehozásakor kiválaszthatja a tetszőleges Spark- vagy Kafka-verziót az Azure Portalon. Mindkét frissítés számos új funkciót, valamint több száz hibajavítást és fejlesztést tartalmaz.
A Spark 2.4 a következőket nyújtja: Dataframe-elemek kiértékelése jegyzetfüzetekben, Barrier végrehajtási mód támogatása a mély tanulási keretrendszerek hatékonyabb integrálásához, rugalmas streamelési fogadók a meglévő köteges csatlakozók használatához, frissített Kafka-kliens (0.10-ról 2.0-ra), beépített magasabb rendű függvények, valamint Apache Avro-adatforrás. A frissítések teljes listája az Apache Spark 2.4 kiadási megjegyzéseiben található.
A korábbi, 1.1-es verzióról a Kafka 2.1-re való frissítéssel az ügyfelek a HDInsighton jobb közvetítői rugalmasságot élvezhetnek a továbbfejlesztett replikációs protokollnak köszönhetően, kihasználhatják a KafkaAdminClient API új funkcióit, a konfigurálható kvótakezelést, valamint a Zstandard tömörítés támogatását. A frissítések teljes listája a Kafka 2.0 és a Kafka 2.1 kiadási megjegyzéseiben található.
Az Azure HDInsight használatba vételéhez tekintse meg a dokumentációt. A legújabb frissítésekért kövessen az @AzureHDInsight fiókot vagy a HDInsight blogot. Ha kérdése vagy visszajelzése van, küldjön e-mailt az AskHDInsight@microsoft.com címre.