Azure HDInsight’ta Apache Spark 2.4 ve Apache Kafka 2.1 desteği
Yayımlanma tarihi: 08 Temmuz, 2019
Azure HDInsight şimdi Apache Spark 2.4 ve Apache Kafka 2.1’i destekliyor. Azure portalında küme oluştururken istediğiniz Spark veya Kafka sürümünü seçebilirsiniz. Her iki güncelleştirme de birkaç yeni özellik, yüzlerce hata düzeltmesi ve geliştirme ile birlikte geliyor.
Spark 2.4; not defterlerinde veri çerçevelerinin etraflı değerlendirmesine olanak verir, derin öğrenme çerçeveleriyle daha iyi tümleştirme sağlamak için Bariyer yürütme modunu destekler ve esnek akış havuzlarıyla mevcut toplu iş bağlayıcılarının kullanılmasını imkan tanır. Kafka istemcisi 0.10’dan 2.0 sürümüne yükseltildi. Yerleşik Daha Yüksek sıralı işlevler ve Apache Avro veri kaynağı sağlandı. Tam güncelleştirme listesi için Apache Spark 2.4 sürüm notlarına bakın.
HDInsight’da önceki sürümden (1.1) Kafka 2.1’e geçen müşteriler, geliştirilmiş bir çoğaltma protokolü sayesinde daha fazla aracı dayanıklılığı, KafkaAdminClient API’sinde yeni işlevler, yapılandırılabilir kota yönetimi ve Zstandard sıkıştırma desteği elde edecekler. Tam güncelleştirme listesi için Kafka 2.0 ve Kafka 2.1 sürüm notlarına bakın.
Azure HDInsight’ı kullanmaya başlamak için belgelerimize bakın. En son güncelleştirmeler için @AzureHDInsight hesabından veya HDInsight blogundan bizi takip edin. Soru ve geri bildirimleriniz için AskHDInsight@microsoft.com adresinden bize yazın.