探究:
Azure HDInsight 是完全托管的云服务,通过它,可以轻松、快捷、经济地处理大量数据。使用 Hadoop、Spark、Hive、LLAP、Kafka、Storm、 HBase、Microsoft ML Server 等常见开源框架。Azure HDInsight 允许实现许多方案,例如 ETL、数据仓库存储、及其学习、IoT 等。
服务特征
- 针对不同大数据方案优化的预配置群集
- 网络安全:保护网关 Azure VNET 支持
- 对群集提供 99.9 % SLA
- 数据安全:对存储进行加密和基于角色的访问控制
- 高可用性
- 通过 Azure Log Analytics 实现高级监视
- 云缩放的成本效益
- 集成:Azure Cosmos DB 和其他 Azure 数据服务
- 通过 Azure 数据工厂执行的按需作业
- 通过企业安全性套餐实现 Active Directory 和 Apache Ranger 集成
组件
- Hadoop
- Kafka
- Spark
- HBase
- 交互查询
- Storm
- HDInsight 机器学习服务*
- 扩展 HDInsight 以安装任何开源引擎**
*HDInsight 机器学习服务需收取附加费
**Microsoft 不对这些开源应用提供 SLA 支持。仅为以上工作负荷提供支持和 SLA。
定价特征
Azure HDInsight 群集
群集运行一组依赖于组件的节点,按分钟计费。节点因组(例如辅助节点、头节点等)、数量和实例类型(例如 D1v2)而异。
请参阅以下常见问题解答,了解有关工作负荷和所需节点的详细信息。在群集的生命周期内,客户为每个节点付费。以下节点价格代表 Microsoft ML Server 以外的所有工作负荷,Microsoft ML Server 需收取附加费。
美国政府实体有资格从授权解决方案提供商处购买 Azure 政府服务(无需预付定金),或者可直接通过即用即付在线订阅购买。
重要提示 - 该价格 (R$) 只是一个参考;这是一项国际交易,最终价格受汇率和所含 IOF 税的影响。不会发布 eNF。
已购买 Azure 德国版在欧盟 (EU)、欧洲自由贸易联盟 (EFTA) 和英国 (UK) 经商的客户及合作伙伴可购买此版本。它在德国范围内提供数据驻留以及其他级别的控制和数据保护。你还可注册 Azure 免费试用版。
美国政府实体有资格从授权解决方案提供商处购买 Azure 政府服务(无需预付定金),或者可直接通过即用即付在线订阅购买。
重要提示 - 该价格 (R$) 只是一个参考;这是一项国际交易,最终价格受汇率和所含 IOF 税的影响。不会发布 eNF。
已购买 Azure 德国版在欧盟 (EU)、欧洲自由贸易联盟 (EFTA) 和英国 (UK) 经商的客户及合作伙伴可购买此版本。它在德国范围内提供数据驻留以及其他级别的控制和数据保护。你还可注册 Azure 免费试用版。
定价详细信息
组件 | 定价 |
---|---|
Hadoop、Spark、Interactive Query、Kafka*、Storm、HBase | 基本价格/节点-小时 + $0/核心-小时 |
HDInsight 机器学习服务** | 基本价格/节点-小时 + $0.085/核心-小时 |
企业安全性套餐 | 基本价格/节点-小时 + $-/核心-小时 |
基本价格/节点-小时
下面列出了所有 Azure VM 的完整产品/服务。此外,虽然它仅显示 Ev3 定价,但我们的 Esv3 实例按相同的价格提供。若要查看 HDInsight 支持的具体 VM 及其价格,请在 Azure 门户上的群集创建阶段查看“配置和定价”部分。有关 HDInsight 默认和推荐的 VM 的其他信息,请参阅 Microsoft Docs。
HDInsight 内存优化节点
实例 | vCPU | RAM | OS | HDInsight 价格 | 总价++ |
---|---|---|---|---|---|
E2 v3 | 2 | 16 GB | $- | $- | $- |
E4 v3 | 4 | 32 GB | $- | $- | $- |
E8 v3 | 8 | 64 GB | $- | $- | $- |
E16 v3 | 16 | 128 GB | $- | $- | $- |
E20 v3 | 20 | 160 GB | $- | $- | $- |
E32 v3 | 32 | 256 GB | $- | $- | $- |
E64i v3 | 64 | 432 GB | $- | $- | $- |
E64 v3 | 64 | 432 GB | $- | $- | $- |
实例 | CPU | RAM | OS | HDInsight 价格 | 总价++ |
---|---|---|---|---|---|
D12 v2 | 4 | 28 GB | $- | $- | $- |
D13 v2 | 8 | 56 GB | $- | $- | $- |
D14 v2 | 16 | 112 GB | $- | $- | $- |
HDInsight 的计算优化节点
实例 | CPU | RAM | OS | HDInsight 价格 | 总价++ |
---|---|---|---|---|---|
F4 | 4 | 8 GB | $- | $- | $- |
F8 | 8 | 16 GB | $- | $- | $- |
F16 | 16 | 32 GB | $- | $- | $- |
HDInsight 常规用途节点
AV2 HDInsight 节点在 Av2 标准 VM 上运行,这是最新一代的 A 系列虚拟机,具有类似的 CPU 性能但磁盘速度更快。
实例 | CPU | RAM | OS | HDInsight 价格 | 总价++ |
---|---|---|---|---|---|
A1 v2 | 1 | 2 GB | $- | $- | $- |
A2 v2 | 2 | 4 GB | $- | $- | $- |
A2m v2 | 2 | 16 GB | $- | $- | $- |
A4 v2 | 4 | 8 GB | $- | $- | $- |
A4m v2 | 4 | 32 GB | $- | $- | $- |
A8 v2 | 8 | 16 GB | $- | $- | $- |
A8m v2 | 8 | 64 GB | $- | $- | $- |
实例 | CPU | RAM | OS | HDInsight 价格 | 总价++ |
---|---|---|---|---|---|
A1 | 1 | 1.75 GB | $- | $- | $- |
A2 | 2 | 3.5 GB | $- | $- | $- |
A5 | 2 | 14 GB | $- | $- | $- |
A3 | 4 | 7 GB | $- | $- | $- |
A6 | 4 | 28 GB | $- | $- | $- |
A4 | 8 | 14 GB | $- | $- | $- |
A7 | 8 | 56 GB | $- | $- | $- |
实例 | CPU | RAM | OS | HDInsight 价格 | 总价++ |
---|---|---|---|---|---|
D1 v2 | 1 | 3.5 GB | $- | $- | $- |
D2 v2 | 2 | 7 GB | $- | $- | $- |
D3 v2 | 4 | 14 GB | $- | $- | $- |
D4 v2 | 8 | 28 GB | $- | $- | $- |
D5 v2 | 16 | 56 GB | $- | $- | $- |
可用的开发/测试定价
开发/测试定价适用于希望以个人或以团队为单位运行开发和测试工作负载的 Visual Studio 订阅者。活跃的 Visual Studio 订阅者使用 Azure 开发/测试产品/服务时可享受各种折扣。了解有关开发/测试产品或服务和 Visual Studio 订阅的详细信息。
常见问题
-
HDInsight 针对每个群集类型部署不同数量的节点。在给定群集类型中有用于各种节点的不同角色,使客户能够将给定角色中的节点大小调整为适合其工作负载详情。例如,如果执行的分析类型大量占用内存,那么 Hadoop 群集可将其工作节点设置为具有大量内存。
适用于 HDInsight 的 Hadoop 群集部署有两个角色:
- 头节点(2 个节点)
- 数据节点(至少 1 个节点)
适用于 HDInsight 的 HBase 群集部署有三个角色:
- 控制服务器(2 个节点)
- 区域服务器(至少 1 个节点)
- 主节点/ZooKeeper 节点(3 个节点)
适用于 HDInsight 的 Storm 群集部署有三个角色:
- Nimbus 节点(2 个节点)
- 监管服务器(至少 1 个节点)
- ZooKeeper 节点(3 个节点)
适用于 HDInsight 的 Spark 群集部署有三个角色:
- 头节点(2 个节点)
- 工作节点(至少 1 个节点)
- Zookeeper 节点(3 个节点)(A1 Zookeeper 免费)
除了群集部署结构,使用 R-Server 还将会产生一个边缘节点。
-
收费针对的是群集运行的分钟数(四舍五入到最接近的分钟),而不是小时。
-
如果在美国东部使用 2 个 D13 v2 头节点和 3 个 D12 v2 数据节点运行群集 100 个小时,将有以下两种计费方案:
- 在标准 HDInsight 群集上 - 100 小时 x (2 x $-/小时 + 3 x $-/小时) = $-
- 在使用企业安全性套餐的标准 HDInsight 群集上 - 100 小时 x (2 x $-/小时 + 3 x $-/小时) + 100 小时 x (2 x 8 + 3 x 4 + 3 x 2) x $-/核心-小时 = $-
-
若要停止 HDInsight 群集,则必须删除该群集。默认情况下,应将 HDInsight 群集生成的永久数据写入 Azure Blob 存储、Azure Data Lake Storage Gen1 或 Azure Data Lake Storage Gen2,使数据不受删除的影响。如果希望保留 Hive 元数据(表和架构),则应该借助外部元数据商店设置群集。你可以在本文档中找到更多详细信息。
-
有多种方式可降低成本:
- 提高现有群集利用率。
- 删除不使用的群集。要详细了解如何删除群集,请参阅使用浏览器、PowerShell 或 Azure CLI 删除 HDInsight 群集
- 纵向缩减。要详细了解如何手动缩放群集,请参阅缩放 HDInsight 群集
- 启用自动缩放。要详细了解如何自动缩放群集,请参阅自动缩放 Azure HDInsight 群集(预览版)
- 使用更低的成本部署群集。这包括恰当计划要使用的节点数量、要用于头节点和工作器节点的节点类型以及要启动群集的区域(因为 HDInsight 提供了可以部署到的许多不同节点类型),以及一系列定价选项。查看本文的“基本价格/节点小时”部分,了解定价;如需了解详细信息,请参阅 HDInsight 群集的容量规划
- 提高现有群集利用率。
-
数据节点数量视你的需求而变化。凭借 Azure 云服务的良好灵活性,你可以尝试多种不同的群集大小,以确定性能和成本的最佳组合,只需为在特定时间使用的服务付费。也可以按需缩放群集,以满足工作负载的要求。
-
对于所能创建的 HDInsight 数据节点的数目,每个订阅均有默认限制。如果你需要创建较大的 HDInsight 群集或多个 HDInsight 群集,其节点总数超过了当前订阅的最大值,则可以请求提高订阅的计费限制。请打开“支持类型”为“计费”的支持票证。根据你请求的每订阅最大节点数,我们可能要求你提供更多信息,以便我们能够优化你的部署。
-
若要估算不同大小的群集的成本,请尝试使用 Azure 计算器。
资源
与销售专家交谈,演练 Azure 定价情况。了解你的云解决方案的定价。
获取免费云服务和价值 $200 的赠金来探索 Azure 30 天。