¿Qué es HDInsight en AKS? (versión preliminar)

Importante

Esta funcionalidad actualmente está en su versión preliminar. En Términos de uso complementarios para las versiones preliminares de Microsoft Azure encontrará más términos legales que se aplican a las características de Azure que están en versión beta, en versión preliminar, o que todavía no se han lanzado con disponibilidad general. Para más información sobre esta versión preliminar específica, consulte la Información de Azure HDInsight sobre la versión preliminar de AKS. Para plantear preguntas o sugerencias sobre la característica, envíe una solicitud en AskHDInsight con los detalles y síganos para obtener más actualizaciones sobre Comunidad de Azure HDInsight.

HDInsight en AKS es una plataforma como servicio (PaaS) moderna, confiable, segura y totalmente administrada que se ejecuta en Azure Kubernetes Service (AKS). HDInsight en AKS permite implementar cargas de trabajo analíticas de código abierto populares, como Apache Spark™, Apache Flink®️ y Trino, sin la sobrecarga de tener que administrar y supervisar los contenedores.

Es posible crear aplicaciones de macrodatos a escala de petabyte de un extremo a otro que abarquen el streaming a través de Apache Flink, la ingeniería de datos y el aprendizaje automático mediante Apache Spark y el potente motor de consultas de Trino.

Todas estas funcionalidades, combinadas con el enfoque sólido para desarrolladores de HDInsight en AKS, permiten a las empresas y a los nativos digitales tener conocimientos técnicos profundos para crear y operar con aplicaciones que se adapten a sus necesidades. HDInsight en AKS permite a los desarrolladores acceder a todas las configuraciones enriquecidas proporcionadas por el software de código abierto y la extensibilidad para incluir sin problemas otras ofertas del ecosistema. Esta oferta permite a los desarrolladores probar y ajustar sus aplicaciones para sacar el mejor rendimiento a un coste óptimo.

HDInsight en AKS se integra con todo el ecosistema de Azure, acortando los ciclos de implementación y mejorando el tiempo para obtener valor.

Arquitectura técnica

HDInsight en AKS presenta el concepto de clústeres y grupos de clústeres, lo que le permitirá obtener todo el valor de los almacenes de lago de datos. Los grupos de clústeres permiten usar varias cargas de trabajo de proceso en un único lago de datos, lo que elimina la sobrecarga de la administración de red y el planeamiento de recursos.

• Los grupos de clústeres son una agrupación lógica de clústeres que ayudan a crear una interoperabilidad sólida entre varios tipos de clústeres y permiten a las empresas tener los clústeres en la misma red virtual. Los grupos de clústeres proporcionan un acceso rápido y rentable a todos los tipos de clústeres creados bajo demanda y a gran escala. Un grupo de clústeres corresponde a un clúster en la infraestructura de AKS.
• Los clústeres son cargas de trabajo de proceso individuales, como Apache Spark, Apache Flink y Trino, que se pueden crear rápidamente en pocos minutos con configuraciones preestablecidas.

Se puede crear el grupo con un único clúster o una combinación de tipos de clúster basados en lo que se necesite y se puede configurar la personalización de las opciones siguientes:

• Storage
• Red
• Registro
• Supervisión

En el diagrama siguiente, se muestra la arquitectura técnica lógica de los componentes instalados en un grupo de clústeres predeterminado. Los clústeres se aíslan mediante espacios de nombres en clústeres de AKS.

Plataforma de proceso nativa de nube modernizada

La versión más reciente de HDInsight se organiza mediante AKS, lo que permite que la plataforma sea más sólida y que los usuarios puedan controlar los clústeres de forma eficaz. El aprovisionamiento de clústeres en HDInsight en AKS es rápido y confiable, lo que facilita la administración de clústeres y la realización de actualizaciones locales. Con amplias opciones de SKU y modelos de suscripción flexibles, la modernización de almacenes de lago de datos mediante infraestructura escalable, nativa de nube y de código abierto en HDInsight en AKS puede satisfacer todas sus necesidades de análisis.

Entre las características principales se incluyen:

• Rápida creación y escalado de clústeres.
• Facilidad de mantenimiento y actualizaciones de seguridad periódicas.
• Resistencia de clústeres con tecnología moderna de AKS nativa de nube.
• Compatibilidad nativa con la autenticación moderna de OAuth y Microsoft Entra ID.
• Integración profunda con los servicios de Azure: Azure Data Factory (ADF), Power BI y Azure Monitor.

Conectividad con HDInsight

HDInsight en AKS puede conectarse sin problemas con HDInsight. Se pueden aprovechar las ventajas de usar los tipos de clúster necesarios en un modelo híbrido. Interoperar con tipos de clúster de HDInsight con el mismo almacenamiento y metastore en ambas ofertas.

HDInsight ofrece Apache Kafka®, Apache HBase® y otras cargas de trabajo analíticas con el factor de forma de plataforma como servicio (PaaS).

Se admiten los siguientes escenarios:

• Conexión de Apache Flink a Apache HBase
• Conexión de Apache Flink a Apache Kafka
• Conexión de Apache Spark a Apache HBase
• Conexión de Apache Spark a Apache Kafka

Arquitectura de seguridad

HDInsight en AKS es seguro de forma predeterminada. Permite a las empresas proteger los recursos de datos empresariales con Azure Virtual Network, el cifrado y la integración con Microsoft Entra ID. También cumple con los estándares de cumplimiento más populares del sector y del gobierno que cumplen los estándares de Azure. Con más de 30 certificaciones que ayudan a proteger los datos, junto con actualizaciones periódicas, notificaciones del asesor de estado, análisis de estado del servicio, además de los mejores estándares de seguridad en su clase de Azure. HDInsight en AKS ofrece varios métodos para satisfacer las necesidades de seguridad empresarial de forma predeterminada. Para obtener más información, consulte Seguridad de HDInsight en AKS.

Disponibilidad de regiones (versión preliminar pública)

• Oeste de Europa
• Centro de la India
• Sur de Reino Unido
• Centro de Corea del Sur
• Este de EE. UU. 2
• Oeste de EE. UU. 2
• Oeste de EE. UU. 3
• Este de EE. UU.
• Este de Asia
• EUAP de Este de EE. UU. 2
• Oeste de EE. UU.
• Japón Oriental
• Este de Australia
• Centro de Canadá
• Norte de Europa
• Sur de Brasil
• Este de Noruega
• Norte de Suiza
• Centro de Francia
• Centro de EE. UU.
• Sudeste de Asia
• Centro-sur de EE. UU.

Nota:

• La marca y las marcas comerciales de Trino son propiedad de Trino Software Foundation, que también las administra. El uso de estas marcas no implica la aprobación de Trino Software Foundation.
• Apache Spark, Spark y el logotipo de Spark son marcas comerciales de Apache Software Foundation (ASF).
• Apache, Apache Kafka, Kafka y el logotipo de Kafka son marcas comerciales de la Apache Software Foundation (ASF).
• Apache, Apache Flink, Flink y el logotipo de Flink son marcas comerciales de Apache Software Foundation (ASF).
• Apache HBase, HBase y el logotipo de HBase son marcas comerciales de Apache Software Foundation (ASF).
• Apache®, Apache Spark™, Apache HBase®, Apache Kafka® y Apache Flink® son marcas registradas o marcas comerciales de Apache Software Foundation en Estados Unidos y otros países. El uso de estas marcas no implica la aprobación de Apache Software Foundation.