你当前正在访问 Microsoft Azure Global Edition 技术文档网站。 如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站，请访问 https://docs.azure.cn。

什么是 HDInsight on AKS ？ （预览版）

  • 项目

重要

此功能目前以预览版提供。 Microsoft Azure 预览版的补充使用条款包含适用于 beta 版、预览版或其他尚未正式发布的 Azure 功能的更多法律条款。 有关此特定预览版的信息，请参阅 Azure HDInsight on AKS 预览版信息。 如有疑问或功能建议，请在 AskHDInsight 上提交请求并附上详细信息，并在 Azure HDInsight Community 上关注我们以了解更多更新。

AKS 上的 HDInsight 是一种在 Azure Kubernetes 服务 (AKS) 上运行的现代、可靠、安全且完全托管的平台即服务 (PaaS)。 AKS 上的 HDInsight 可让你部署常用的开源分析工作负载，例如 Apache Spark™、Apache Flink®️ 和 Trino，而没有管理和监视容器的开销。

可以使用 Apache Spark 和 Trino 的强大查询引擎生成跨越通过 Apache Flink 流式传输、数据工程和机器学习的端到端、PB 级大数据应用程序。

所有这些功能与 AKS 上 HDInsight 强大的开发人员重点相结合，可让具有深厚的技术专业知识的企业和数字原住民构建并运营适合其需求的应用程序。 使用 AKS 上的 HDInsight，开发人员可以访问开源软件提供的所有丰富配置，以及无缝包含其他生态系统产品/服务的扩展性。 此产品/服务可让开发人员测试和优化其应用程序，以最优成本获取最佳性能。

AKS 上的 HDInsight 与整个 Azure 生态系统集成，缩短实现周期并缩短实现价值的时间。

显示 AKS 上 HDInsight 优势的关系图。

技术体系结构

AKS 上的 HDInsight 引入了群集池和群集的概念，可让你实现数据湖屋的完整价值。 群集池允许在单个数据湖上使用多个计算工作负荷，从而消除网络管理和资源规划的开销。

  • 群集池是群集的逻辑分组，可帮助跨多个群集类型建立可靠的互操作性，并允许企业在同一虚拟网络中拥有群集。 群集池提供对按需和大规模创建的所有群集类型的快速且经济高效的访问。 一个群集池对应于 AKS 基础结构中的一个群集。
  • 群集是单个计算工作负载，例如 Apache Spark、Apache Flink 和 Trino，可以在几分钟内使用预设配置快速创建。

可以根据需求使用单个群集或群集类型的组合创建池，并且可以自定义配置以下选项：

  • 存储
  • 网络
  • 日志记录
  • 监视

下图显示了默认群集池中安装的组件的逻辑技术体系结构。 群集使用 AKS 群集中的命名空间隔离。

显示 AKS 上 HDInsight 体系结构的关系图。

现代化的云原生计算平台

最新版 HDInsight 使用 AKS 进行协调，使平台更加可靠，并让用户能够有效地处理群集。 在 AKS 的 HDInsight 上预配群集快速而可靠，因此可以轻松管理群集和执行就地升级。 借助丰富的 SKU 选项和灵活的订阅模型，使用 AKS 的 HDInsight 上的开源、云原生和可缩放基础结构现代化数据湖屋可以满足所有分析需求。

显示 AKS 上 HDInsight 如何在云原生计算平台上实现现代化的关系图。

主要功能包括：

  • 群集的创建和缩放快速。
  • 维护简便且定期安全更新。
  • 由现代云原生 AKS 提供支持的群集复原能力。
  • 原生支持使用 OAuth 和 Microsoft Entra ID 的现代身份验证。
  • 与 Azure 服务 – Azure 数据工厂 (ADF)、Power BI、Azure Monitor 深度集成。

与 HDInsight 的连接

AKS 上的 HDInsight 可与 HDInsight 无缝连接。 可以在混合模型中使用所需的群集类型来获得优势。 在两个产品中使用相同的存储和元存储与群集类型的 HDInsight 进行互操作。

HDInsight 在平台即服务 (PaaS) 形式中提供 Apache Kafka®、Apache HBase® 和其他分析工作负载。

显示连接概念的关系图。

支持以下方案：

安全体系结构

默认情况下，AKS 上的 HDInsight 是安全的。 它可让企业使用 Azure 虚拟网络、加密和与 Microsoft Entra ID 集成来保护企业数据资产。 它还符合支持 Azure 标准的最常用行业和政府合规性标准。 通过 30 多个认证来帮助保护数据以及定期更新、运行状况顾问通知、服务运行状况分析，以及一流的 Azure 安全标准。 AKS 上的 HDInsight 提供多种方法来应对企业安全需求。 有关详细信息，请参阅 AKS 上的 HDInsight 安全性。

显示安全概念的关系图。

区域可用性（公共预览版）

  • 西欧
  • 印度中部
  • 英国南部
  • 韩国中部
  • 美国东部 2
  • 美国西部 2
  • 美国西部 3
  • 美国东部
  • 东亚
  • 美国东部 2 EUAP
  • 美国西部
  • 日本东部
  • 澳大利亚东部
  • 加拿大中部
  • 北欧
  • Brazil South

注意