Apache Kafka-REST-Proxy in HDInsight jetzt allgemein verfügbar

Der Kafka-REST-Proxy in HDInsight ist jetzt allgemein verfügbar. Der Kafka-REST-Proxy vereinfacht Messagingarchitekturmuster erheblich, da sich Producer und Consumer außerhalb des virtuellen Netzwerks befinden können. Außerdem ist das Anzeigen von Clustermetadaten möglich, um den Status des Clusters prüfen und Verwaltungsvorgänge auszuführen. Der Kafka-REST-Proxy in HDInsight kombiniert die Vorteile eines Kafka-REST-Proxys mit der Zuverlässigkeit, Skalierbarkeit, Überwachung und Kostenoptimierung, für die HDInsight bekannt ist.

Gängige Anwendungsfälle

• Clients in nicht unterstützter Sprache, die Nachrichten an Kafka senden oder von Kafka empfangen 
• Integration mit Legacyanwendungen, die Kafka möglicherweise nicht nativ unterstützen 
• Clients, die möglicherweise über keine Sichtverbindung mit Kafka-Brokern verfügen   

Wichtige Features    

• Bereitstellung mit nur einem Klick  
• Hochverfügbar und skalierbar
• Gesichert mithilfe von AAD-Autorisierung und OAuth-Protokoll  
• Unterstützung für Kafka-Administrator-APIs, die allgemeine Kafka-Administratorvorgänge ermöglichen
• Unterstützung für Kafka-Daten-APIs, die das Erstellen und Verwenden von Datensätzen ermöglichen   

Leistung und Skalierbarkeit

Der Proxy garantiert eine niedrige Latenz im Millisekundenbereich und einen hohen Durchsatz, der nahezu der Leistung des nativen Kafka-Brokers entspricht. Der REST-Proxydienst wird durch skalierbare Verwaltungsknoten unterstützt, was zu einer garantierten Hochverfügbarkeit und Kostenoptimierung führt, ohne dabei die Leistung zu beeinträchtigen.  

Sicherheit

Der Proxy wird mit HDInsight Private Link integriert, um eine Netzwerkisolation ohne öffentliche IP-Adresse zu bieten. Bei der Integration mit HDInsight Private Link werden Kafka-REST-Proxyendpunkte in eine private IP-Adresse aufgelöst, die nur innerhalb Ihres Intranets aufgelöst werden kann. Der gesamte Datenverkehr, der den Kafka-REST-Proxy durchläuft, durchläuft den Azure-Backbone.  

Der Zugriff auf den Kafka-REST-Proxy wird mithilfe von Azure Active Directory-Dienstgruppen gesichert. Dienste müssen sich beim Azure Active Directory-Dienst registrieren und die tokenbasierte Authentifizierung verwenden, um sich beim Dienst zu identifizieren.  

Erste Schritte

Informationen zu den ersten Schritte mit dem Kafka-REST-Proxy finden Sie in einem unserer verschiedenen Anwendungsbeispiele für den Dienst. 

Beispiel für eine Clientanwendung mit Kafka-REST-Proxy in HDInsight