A medida que las empresas buscan hacer más con los datos, aprovechen al máximo la nube y almacenen en la antigüedad de la inteligencia artificial, buscan servicios que procesan datos a escala, de forma confiable y eficaz. Hoy, nos complace anunciar la próxima versión preliminar pública de HDInsight en Azure Kubernetes Service (AKS), nuestro servicio de macrodatos nativo de nube y de código abierto, totalmente rediseñado en la infraestructura de Azure Kubernetes Service con dos nuevas cargas de trabajo y numerosas mejoras en la pila. La versión preliminar pública estará disponible para su uso el 10/10.

HDInsight en AKS amplificando el rendimiento

HDInsight en AKS incluye cargas de trabajo de Apache Spark, Apache Flink y Trino en una infraestructura de Azure Kubernetes Service y ofrece una integración profunda con servicios populares de análisis de Azure, como Power BI, Azure Data Factory y Azure Monitor, al tiempo que aprovecha los servicios administrados de Azure para Prometheus y Grafana para la supervisión. HDInsight en AKS es una solución de análisis de código abierto de un extremo a otro que es fácil de implementar y rentable para operar. 

HDInsight en AKS ayuda a los clientes a aprovechar el software de código abierto para sus necesidades de análisis: 

• Proporcionar un conjunto mantenido de cargas de trabajo de análisis de código abierto como Apache Spark, Apache Flink y Trino. Estas cargas de trabajo son el software de código abierto más adecuado para la ingeniería de datos, el aprendizaje automático, el streaming y las consultas.
• Ofrecer infraestructura administrada, seguridad y supervisión para que los equipos puedan dedicar su tiempo a crear aplicaciones innovadoras sin necesidad de preocuparse por los demás componentes de su pila. Teams puede estar seguro de que HDInsight ayuda a mantener sus datos seguros. 
• Ofrece flexibilidad que los equipos necesitan ampliar las funcionalidades al aprovechar el ecosistema de código abierto enriquecido de hoy en día para bibliotecas reutilizables y personalizar aplicaciones mediante acciones de script.

Los clientes que están profundamente invertidos en análisis de código abierto pueden usar HDInsight en AKS para reducir los costos mediante la configuración de sistemas de análisis completos y de un extremo a otro en cuestión de minutos, aprovechando las integraciones listas para usar, la seguridad integrada y la infraestructura confiable. Nuestras inversiones en mejoras de rendimiento y características como la escalabilidad automática permiten a los clientes ejecutar sus cargas de trabajo de análisis a un costo óptimo. HDInsight en AKS incluye una estructura de precios muy sencilla y coherente por núcleo virtual por hora, independientemente del tamaño del recurso o la región, además del costo de los recursos aprovisionados.

A los desarrolladores les encanta HDInsight la flexibilidad que ofrece para ampliar las funcionalidades base de las cargas de trabajo de código abierto a través de acciones de script y administración de bibliotecas. HDInsight en AKS tiene una experiencia intuitiva en el portal para administrar bibliotecas y supervisar recursos. Los desarrolladores tienen la flexibilidad de usar un Kit de desarrollo de software (SDK), plantillas de Azure Resource Manager (ARM) o la experiencia del portal en función de sus preferencias.

Únase a nosotros para profundizar en este lanzamiento en nuestro próximo seminario web gratuito. 

Apertura, administración y flexible

HDInsight en AKS cubre toda la gama de necesidades de análisis empresariales que abarcan los trabajos de streaming, procesamiento de consultas, procesamiento por lotes y aprendizaje automático con visualización unificada. 

Cargas de trabajo de código abierto seleccionadas

HDInsight en AKS incluye cargas de trabajo elegidas en función de su uso en escenarios de análisis típicos, adopción de la comunidad, estabilidad, seguridad y soporte técnico del ecosistema. Esto garantiza que los clientes no necesiten lidiar con la complejidad de elección en función de miles de ofertas con funcionalidades superpuestas e interoperabilidad incoherente.  

Cada una de las cargas de trabajo en HDInsight en AKS es la mejor clase para los escenarios de análisis que admite: 

• Apache Flink es el marco de procesamiento de flujos distribuidos de código abierto que impulsa el procesamiento de flujos con estado y permite escenarios de análisis en tiempo real. 
• Trino es el motor de consultas federado que es altamente eficaz y escalable, direccionando consultas ad hoc en una variedad de orígenes de datos, tanto estructurados como no estructurados.  
• Apache Spark es la opción de confianza de millones de desarrolladores para sus necesidades de ingeniería de datos y aprendizaje automático. 

HDInsight en AKS ofrece estas cargas de trabajo populares con un modelo de autenticación común, compatibilidad con meta store compartido y integraciones precompiladas que facilitan la implementación de aplicaciones de análisis.

El servicio administrado reduce la complejidad.

HDInsight en AKS es un servicio administrado en la infraestructura de Azure Kubernetes Service. Con un servicio administrado, los clientes no se cargan con la administración de la infraestructura y otros componentes de software, incluidos los sistemas operativos, la infraestructura de AKS y el software de código abierto. Esto garantiza que las empresas puedan beneficiarse de las mejoras continuas de seguridad y funcionamiento y rendimiento sin invertir horas de desarrollo valiosas. 

La contenedorización permite la implementación, el escalado y la administración sin problemas de los componentes clave de la arquitectura. La resistencia inherente de AKS permite que los pods se vuelvan a programar automáticamente en los nodos recién asignados en caso de errores. Esto significa que los trabajos se pueden ejecutar con interrupciones mínimas en acuerdos de nivel de servicio (SLA). 

Los clientes que combinan varias cargas de trabajo en su instancia de Data Lakehouse necesitan tratar con una variedad de experiencias de usuario, lo que da lugar a una curva de aprendizaje empinada. HDInsight en AKS proporciona una experiencia unificada para administrar su instancia de LakeHouse. El aprovisionamiento, la administración y la supervisión de todas las cargas de trabajo se pueden realizar en un solo panel de vidrio. Además, con los servicios administrados para Prometheus y Grafana, los administradores pueden supervisar el estado del clúster, el uso de recursos y las métricas de rendimiento.  

Mediante las funcionalidades de escalado automático incluidas en HDInsight en AKS, los recursos y, por tanto, el costo, se pueden optimizar en función de las necesidades de uso. En el caso de los trabajos con patrones de carga predecibles, los equipos pueden programar el escalado automático de recursos en función de un calendario predefinido. La retirada correcta permite la definición de períodos de espera para que los trabajos se completen antes de reducir los recursos, equilibrando los costos de forma elegante con experiencia. El escalado automático basado en carga puede aumentar y reducir los recursos en función de los patrones de uso medidos por el uso de proceso y memoria. 

HDInsight en AKS marca un cambio de los mecanismos de seguridad tradicionales como Kerberos. Adopta OAuth 2.0 como marco de seguridad, lo que proporciona un enfoque moderno y sólido para proteger los datos y los recursos. En HDInsight en la autorización de AKS, los controles de acceso se basan en identidades administradas. Los clientes también pueden traer sus propias redes virtuales y asociarlas durante la configuración del clúster, lo que aumenta la seguridad y habilita el cumplimiento de sus directivas empresariales. Los clústeres están aislados con espacios de nombres para proteger los datos y los recursos dentro del inquilino. HDInsight en AKS también permite la administración del acceso al clúster mediante roles de Azure Resource Manager (ARM). 

A los clientes que han participado en la versión preliminar privada les encanta HDInsight en AKS. 

Esto es lo que un usuario tenía que decir sobre su experiencia. 

"Con HDInsight en AKS, hemos pasado sin problemas de las restricciones de nuestra solución interna a una plataforma administrada sólida. Este cambio fundamental significa que nuestros ingenieros ahora son libres de canalizar su experiencia hacia la innovación empresarial principal, en lugar de entrelazarse en la administración de la plataforma. La integración armónica de HDInsight con otros productos de Azure ha elevado nuestra eficiencia. La seguridad mejorada refuerza la integridad y confiabilidad de nuestros datos, mientras que la escalabilidad garantiza que podemos crecer sin problemas. En esencia, HDInsight en AKS forifica nuestra estrategia de datos, lo que permite operaciones empresariales más simplificadas y eficaces". 

Matheus Antunes, Data Architect, XP Inc

Azure HDInsight en recursos de AKS

• Más información sobre Azure Kubernetes Service (AKS)