Подготовка облачных кластеров Hadoop, Spark, R Server, HBase и Storm
Azure HDInsight — это полностью управляемая облачная служба, которая позволяет быстро, просто и без лишних затрат обрабатывать большие объемы данных. Используйте самые популярные платформы с открытым исходным кодом, такие как Hadoop, Spark, Hive, LLAP, Kafka, Storm, HBase, Microsoft ML Server и другие. Azure HDInsight поддерживает извлечение, преобразование и загрузку, хранение данных, машинное обучение, Интернет вещей и множество других сценариев.
Изучите варианты оплаты
Примените фильтры, чтобы настроить варианты оплаты в соответствии со своими потребностями.
Цены являются ориентировочными и не должны рассматриваться как фактические предложения с расценками. Фактические цены могут различаться в зависимости от типа соглашения, заключенного с Майкрософт, от даты покупки и курса обмена валюты. Цены рассчитываются в долларах США и конвертируются на основе спотовых курсов закрытия лондонской биржи, фиксируемых за два рабочих дня до последнего рабочего дня конца предыдущего месяца. Если два рабочих дня до конца месяца выпадают на выходной день на основных рынках, днем установления ставки обычно является день, непосредственно предшествующий этим двум рабочим дням. Данная ставка применяется ко всем транзакциям в течение последующего месяца. Войдите в Калькулятор цен Azure, чтобы увидеть цены на основе вашей текущей программы или предложения от Майкрософт. Обратитесь к специалисту по продажам Azure, чтобы получить дополнительные сведения о ценах или запросить предложение с расценками. Ознакомьтесь с часто задаваемыми вопросами о ценах на Azure.
Государственные структуры США могут приобрести службы "Azure для государственных организаций" у поставщика решений по лицензированию без предварительных финансовых обязательств или непосредственно через онлайн-подписку с оплатой по мере использования.
Важно! Цена в R$ лишь ориентировочная. Так как это предмет международных транзакций, окончательная цена зависит от курсов валют и налогов на финансовые операции (IOF). Форма eNF выдаваться не будет.
Государственные структуры США могут приобрести службы "Azure для государственных организаций" у поставщика решений по лицензированию без предварительных финансовых обязательств или непосредственно через онлайн-подписку с оплатой по мере использования.
Важно! Цена в R$ лишь ориентировочная. Так как это предмет международных транзакций, окончательная цена зависит от курсов валют и налогов на финансовые операции (IOF). Форма eNF выдаваться не будет.
Кластеры Azure HDInsight
Кластеры управляют группой узлов в зависимости от компонента. Плата за использование кластеров начисляется поминутно. Узлы различаются в зависимости от группы (рабочий узел, головной узел и т. д.), количества и типа экземпляра (например, D1v2).
Дополнительные сведения о рабочих нагрузках и необходимых узлах см. ниже в разделе вопросов и ответов. С клиентов взимается плата за каждый узел в течение всего периода существования кластера. Указанная ниже цена за узел актуальна для всех рабочих нагрузок, кроме Microsoft ML Server (взимается дополнительная плата).
| Компонент | Стоимость |
|---|---|
| Hadoop, Spark, Interactive Query, Kafka*, Storm, HBase | Базовая цена за узел в час + $0 за ядро в час |
| Службы машинного обучения HDInsight** | Базовая цена за узел в час + $0.016 за ядро в час |
| Пакет безопасности корпоративного уровня | Базовая цена за узел в час + $- за ядро в час |
Базовая цена за узел в час
Ниже полностью приведено предложение, касающееся всех виртуальных машин Azure. Кроме того, хотя в нем показаны только цены на Ev3, наши экземпляры Esv3 предлагаются по той же цене. Сведения о том, какие виртуальные машины поддерживаются в HDInsight, и цены на них см. в разделе "Конфигурация и цены" на этапе создания кластера на портале Azure. Дополнительные сведения о виртуальных машинах HDInsight по умолчанию и рекомендуемых виртуальных машинах см. на сайте Документация Майкрософт.
Узлы, оптимизированные для операций в памяти, для HDInsight
| Экземпляр | виртуальные ЦП | ОЗУ | ОС | Цены на HDInsight | Общая цена* |
|---|---|---|---|---|---|
| E2 v3 | 2 | 16 ГБ | $- | $- | $- |
| E4 v3 | 4 | 32 ГБ | $- | $- | $- |
| E8 v3 | 8 | 64 ГБ | $- | $- | $- |
| E16 v3 | 16 | 128 ГБ | $- | $- | $- |
| E20 v3 | 20 | 160 ГБ | $- | $- | $- |
| E32 v3 | 32 | 256 ГБ | $- | $- | $- |
| E64i v3 | 64 | 432 ГБ | $- | $- | $- |
| E64 v3 | 64 | 432 ГБ | $- | $- | $- |
| Экземпляр | виртуальные ЦП | ОЗУ | ОС | Цены на HDInsight | Общая цена* |
|---|---|---|---|---|---|
| E2a v4 | 2 | 16 ГБ | $- | $- | $- |
| E4a v4 | 4 | 32 ГБ | $- | $- | $- |
| E8a v4 | 8 | 64 ГБ | $- | $- | $- |
| E16a v4 | 16 | 128 ГБ | $- | $- | $- |
| E20a v4 | 20 | 160 ГБ | $- | $- | $- |
| E32a v4 | 32 | 256 ГБ | $- | $- | $- |
| E48a v4 | 48 | 384 ГБ | $- | $- | $- |
| E64a v4 | 64 | 512 ГБ | $- | $- | $- |
| E96a v4 | 96 | 672 ГБ | $- | $- | $- |
| Экземпляр | виртуальные ЦП | ОЗУ | ОС | Цены на HDInsight | Общая цена* |
|---|---|---|---|---|---|
| D12 v2 | 4 | 28 ГБ | $- | $- | $- |
| D13 v2 | 8 | 56 ГБ | $- | $- | $- |
| D14 v2 | 16 | 112 ГБ | $- | $- | $- |
| Экземпляр | виртуальные ЦП | ОЗУ | ОС | Цены на HDInsight | Общая цена* |
|---|---|---|---|---|---|
| D2a v4 | 2 | 8 ГБ | $- | $- | $- |
| D4a v4 | 4 | 16 ГБ | $- | $- | $- |
| D8a v4 | 8 | 32 ГБ | $- | $- | $- |
| D16a v4 | 16 | 64 ГБ | $- | $- | $- |
| D32a v4 | 32 | 128 ГБ | $- | $- | $- |
| D48a v4 | 48 | 192 ГБ | $- | $- | $- |
| D64a v4 | 64 | 256 ГБ | $- | $- | $- |
| D96a v4 | 96 | 384 ГБ | $- | $- | $- |
Узлы, оптимизированные для вычислений, для HDInsight
| Экземпляр | виртуальные ЦП | ОЗУ | ОС | Цены на HDInsight | Общая цена* |
|---|---|---|---|---|---|
| F4 | 4 | 8 ГБ | $- | $- | $- |
| F8 | 8 | 16 ГБ | $- | $- | $- |
| F16 | 16 | 32 ГБ | $- | $- | $- |
Узлы общего назначения для HDInsight
Узлы AV2 HDInsight запускаются на виртуальной машине AV2 Standard. Это новейшее поколение виртуальных машин серии А с повышенной скоростью дисков и той же производительностью ЦП.
| Экземпляр | виртуальные ЦП | ОЗУ | ОС | Цены на HDInsight | Общая цена* |
|---|---|---|---|---|---|
| A1 v2 | 1 | 2 ГБ | $- | $- | $- |
| A2 v2 | 2 | 4 ГБ | $- | $- | $- |
| A2m v2 | 2 | 16 ГБ | $- | $- | $- |
| A4 v2 | 4 | 8 ГБ | $- | $- | $- |
| A4m v2 | 4 | 32 ГБ | $- | $- | $- |
| A8 v2 | 8 | 16 ГБ | $- | $- | $- |
| A8m v2 | 8 | 64 ГБ | $- | $- | $- |
| Экземпляр | виртуальные ЦП | ОЗУ | ОС | Цены на HDInsight | Общая цена* |
|---|---|---|---|---|---|
| A1 | 1 | 1,75 ГБ | $- | $- | $- |
| A2 | 2 | 3,5 ГБ | $- | $- | $- |
| A5 | 2 | 14 ГБ | $- | $- | $- |
| A3 | 4 | 7 ГБ | $- | $- | $- |
| A6 | 4 | 28 ГБ | $- | $- | $- |
| A4 | 8 | 14 ГБ | $- | $- | $- |
| A7 | 8 | 56 ГБ | $- | $- | $- |
| Экземпляр | виртуальные ЦП | ОЗУ | ОС | Цены на HDInsight | Общая цена* |
|---|---|---|---|---|---|
| D1 v2 | 1 | 3,5 ГБ | $- | $- | $- |
| D2 v2 | 2 | 7 ГБ | $- | $- | $- |
| D3 v2 | 4 | 14 ГБ | $- | $- | $- |
| D4 v2 | 8 | 28 ГБ | $- | $- | $- |
| D5 v2 | 16 | 56 ГБ | $- | $- | $- |
Azure: цены и варианты приобретения
Свяжитесь с нами напрямую
Изучите пошаговое руководство по ценам на Azure. Ознакомьтесь с ценами на интересующее вас облачное решение, узнайте об оптимизации затрат и запросите индивидуальное предложение.
Обратитесь к специалисту по продажамУзнайте о способах приобретения
Приобрести службы Azure можно на веб-сайте Azure, у представителя Майкрософт или у партнера Azure.
Изучить доступные вариантыДополнительные ресурсы
HDInsight
Узнайте больше о функциях и возможностях службы "HDInsight".
Калькулятор цен
Оцените приблизительные ежемесячные затраты при использовании любого сочетания продуктов Azure.
Соглашение об уровне обслуживания
Ознакомьтесь с Соглашением об уровне обслуживания для HDInsight.
Документация
Ознакомьтесь с техническими руководствами, видеороликами и дополнительными ресурсами по службе "HDInsight".
Часто задаваемые вопросы
-
В HDInsight для каждого типа кластера развертывается разное количество узлов. В кластере данного типа существуют различные роли для различных узлов, что позволяет клиенту масштабировать эти узлы в соответствии с ролями и характером рабочей нагрузки. Например, кластер Hadoop может иметь собственные рабочие узлы с большим объемом памяти, если планируется выполнение ресурсоемкой аналитики.
Кластеры Hadoop для HDInsight развертываются с двумя ролями:
- Головной узел (2 узла)
- Узел данных (как минимум 1 узел)
Кластеры HBase для HDInsight развертываются с тремя ролями:
- Головные серверы (2 узла)
- Региональные серверы (как минимум 1 узел)
- Узлы Master/Zookeeper (3 узла)
Кластеры Storm для HDInsight развертываются с тремя ролями:
- Узлы Nimbus (2 узла)
- Серверы Supervisor (как минимум 1 узел)
- Узлы Zookeeper (3 узла)
Кластеры Spark для HDInsight развертываются с тремя ролями.
- Головной узел (2 узла)
- Рабочий узел (как минимум 1 узел)
- Узлы Zookeeper (3 узла) (бесплатно для узлов Zookeeper A1)
При использовании R-Server, помимо архитектуры развертывания кластера, предусмотрен один узел Edge Node.
-
Вы оплачиваете количество минут, в течение которых работал ваш кластер, с округлением до ближайшей минуты (не до часа).
-
Рассмотрим пример кластера с двумя головными узлами D13 v2 и тремя узлами данных D12 v2. Кластер работает в течение 100 ч в регионе "Восточная часть США". Здесь возможны два варианта расчета стоимости:
- Для кластера HDInsight категории "Стандартный": 100 ч x (2 x $-/час + 3 x $-/час) = $-.
- Для кластера HDInsight категории "Стандартный" с Корпоративным пакетом безопасности: 100 ч x (2 x $-/час + 3 x $-/час) + 100 ч x (2 x 8 + 3 x 4 + 3 x 2) x $- за ядро в час = $-.
-
Чтобы остановить кластер HDInsight, его необходимо удалить. По умолчанию постоянные данные, создаваемые в кластере HDInsight, должны записываться в хранилище BLOB-объектов Azure, Azure Data Lake Storage 1-го поколения или Azure Data Lake Storage 2-го поколения. Поэтому удаление кластера не влияет на данные. Если вам нужно сохранить метаданные Hive (таблицы и схемы), необходимо подготовить кластер с внешним хранилищем метаданных. Подробнее об этом см. в данной документации.
-
Есть несколько способов сокращения затрат:
- Более активное использование существующих кластеров.
- Удаление неиспользуемых кластеров. Дополнительные сведения об удалении кластера см. в статье Удаление кластера HDInsight с помощью браузера, PowerShell или Azure CLI.
- Уменьшение масштаба. Дополнительные сведения о масштабировании кластеров вручную см. в статье Масштабирование кластеров HDInsight.
- Включение автомасштабирования. Сведения об автомасштабировании кластеров см. в статье Автоматическое масштабирование кластеров Azure HDInsight.
- Развертывание кластеров с меньшими затратами. При этом необходимо правильно спланировать количество используемых узлов, тип, который будет применяться для головных и рабочих узлов, а также регион для запуска кластера, так как в HDInsight предлагается множество различных типов узлов для развертывания с различными вариантами стоимости. Цены приведены в разделе "Базовая цена за узел в час" этой статьи. Дополнительную информацию см. в статье Планирование загрузки кластеров HDInsight.
- Более активное использование существующих кластеров.
-
Количество узлов данных варьируется в зависимости от ваших потребностей. Благодаря эластичности облачных служб Azure можно создавать кластеры любого размера. Это позволяет добиться оптимального сочетания производительности и цены. Вы платите только за то, что используется в определенный момент времени. Кластеры могут также масштабироваться по запросу, увеличиваясь и уменьшаясь в соответствии с требованиями рабочей нагрузки.
-
Для каждой подписки по умолчанию установлен предел количества созданных узлов данных. Если возникла необходимость создать больший по размеру кластер HDInsight или несколько кластеров HDInsight, общее число которых превышает установленный максимум по подписке, вы можете запросить увеличение лимитов тарификации для вашей подписки. Откройте билет службы поддержки с типом поддержки “выставление счетов”. В зависимости от максимального числа запрошенных узлов на одну подписку вам может понадобиться дополнительная информация, которая позволит оптимизировать ваши развертывания.
-
Для оценки затрат на кластеры разных размеров попробуйте калькулятор Azure.
Обратитесь к специалисту по продажам, чтобы узнать, как формируются цены в Azure. Составьте предоставление о цене на свое облачное решение.
К вашим услугам бесплатные облачные службы и кредит в сумме $200 для изучения Azure в течение 30 дней.