HDInsight Apache Kafka REST Proxy is nu algemeen beschikbaar
Publicatiedatum: 09 maart, 2021
HDInsight Kafka REST Proxy is nu algemeen beschikbaar. De Kafka REST-proxy vereenvoudigt architectuurpatronen voor berichten aanzienlijk doordat producenten en consumenten zich buiten het virtuele netwerk kunnen bevinden. Ook kunnen de metagegevens van het cluster worden weergegeven, zodat de status van het cluster wordt weergegeven en de mogelijkheid wordt geboden om beheerbewerkingen uit te voeren. De HDInsight Kafka REST-proxy combineert de voordelen van een Kafka REST-proxy met de voordelen van betrouwbaarheid, schaalbaarheid, bewaking en kostenoptimalisatie waar HDInsight om bekend staat.
Algemene use cases
- Clients in een niet-ondersteunde taal die berichten naar/van Kafka versturen/ontvangen
- Integreren met oudere toepassingen die mogelijk geen systeemeigen ondersteuning bieden voor Kafka
- Clients die mogelijk geen netwerkregel hebben die is gericht op Kafka Brokers
Belangrijke functies
- Implementatie met één klik
- In hoge mate beschikbaar en schaalbaar
- Beveiligd met AAD-autorisatie en OAuth-protocol
- Ondersteuning voor Kafka-beheer-API's waardoor algemene Kafka-beheerbewerkingen mogelijk zijn
- Ondersteuning voor API's voor Kafka-gegevens die productie en verbruik van records mogelijk maken.
Prestaties en schaalbaarheid
Garandeert een lage latentie van milliseconden en hoge doorvoer vergelijkbaar met native Kafka Broker-prestaties. De REST Proxy-service wordt mogelijk gemaakt door schaalbare beheerknooppunten, wat leidt tot hoge beschikbaarheid en kostenoptimalisatie zonder dat dit ten koste gaat van de prestaties.
Beveiliging
Kan worden geïntegreerd met HDInsight Private Link om netwerkisolatie zonder openbare IP-adressen te bieden. Wanneer Kafka REST-proxy-eindpunten zijn geïntegreerd met HDInsight Private Link, worden ze omgezet naar een privé-IP-adres dat alleen binnen uw intranet kan worden omgezet. Al het verkeer dat zich verplaatst via de Kafka REST-proxy, passeert de Azure-backbone.
Toegang tot de Kafka REST Proxy wordt beveiligd met behulp van Azure Active Directory-servicegroepen. Services moeten zich registreren bij de Azure Active Directory-service en verificatie op basis van een token gebruiken om zichzelf te identificeren bij de service.
Aan de slag
Raadpleeg een van onze verschillende toepassingsvoorbeelden over de service om aan de slag te gaan met Kafka REST Proxy.
Voorbeeld van een toepassing van HDInsight Kafka REST-proxyclient