Цены на Azure Data Lake Storage 2-го поколения

Надежное хранилище Data Lake Storage с высокой степенью масштабируемости, созданное на основе хранилища BLOB-объектов

Azure Data Lake Storage 2-го поколения является самым продуктивным хранилищем данных в мире. В нем сочетается мощная файловая система, совместимая с Hadoop, в котором встроено иерархическое пространство имен с массивным масштабированием и экономией хранилища BLOB-объектов, что позволяет ускорить переход от подтверждения концепции к производству.

  1. Полная интеграция с платформой хранилища BLOB-объектов Azure. Все возможности хранилища BLOB-объектов (интеграция Azure Active Directory, шифрование при хранении, высокий уровень доступности и аварийное восстановление, автоматическое управление политиками жизненного цикла, брандмауэры учетных записей и т. д.) поддерживаются в Azure Data Lake Storage
  2. Оптимизация под ведущие облачные подсистемы аналитики
  3. Полная интеграция со всеми элементами стека данных Azure Big Data Analytics для обеспечения быстрой доставки аналитических сведений
  4. Позволяет аналитическим данным и данными объекта находиться в одном хранилище без копирования данных или каких-либо изменений в программе
  5. Операции выполняются быстрее, чем в других хранилищах данных, благодаря чему рабочие нагрузки аналитики работают быстрее, что снижает совокупную стоимость владения

Учетные записи общего назначения версии 2 обеспечивают доступ к новейшим возможностям хранения Azure, включая холодный и архивный уровни хранилища, с самой низкой ценой за гигабайт данных. С помощью этих учетных записей можно получить доступ к службе Data Lake Storage, блочным и страничным BLOB-объектам, файлам и очередям.

Azure Data Lake Storage 2-го поколения предоставляет два способа организации данных. Используя параметр иерархического пространства имен, пользователи могут организовать Data Lake в структурированные каталоги, папки и файлы. С помощью неструктурированного пространства имен пользователи могут управлять Data Lake в качестве неструктурированного хранилища BLOB-объектов. Независимо от выбора варианта плата за хранение будет та, которая указана в таблице ниже. Тем не менее, с помощью параметра иерархического пространства имен клиенты в рамках счета будут оплачивать дополнительные метаданные, связанные со структурой папки и каталога.

Цены на хранилище данных

Горячий Холодный Архив
Первые 50 ТБ в месяц $- за ГБ $- за ГБ $- за ГБ
Более 450 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Более 500 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Первые 50 ТБ в месяц $- за ГБ $- за ГБ $- за ГБ
Более 450 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Более 500 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Первые 50 ТБ в месяц $- за ГБ $- за ГБ $- за ГБ
Более 450 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Более 500 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Первые 50 ТБ в месяц $- за ГБ $- за ГБ Н/Д
Более 450 ТБ/месяц $- за ГБ $- за ГБ Н/Д
Более 500 ТБ/месяц $- за ГБ $- за ГБ Н/Д
Горячий Холодный Архив
Первые 50 ТБ в месяц $- за ГБ $- за ГБ $- за ГБ
Более 450 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Более 500 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Первые 50 ТБ в месяц $- за ГБ $- за ГБ $- за ГБ
Более 450 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Более 500 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Первые 50 ТБ в месяц $- за ГБ $- за ГБ $- за ГБ
Более 450 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Более 500 ТБ/месяц $- за ГБ $- за ГБ $- за ГБ
Первые 50 ТБ в месяц $- за ГБ $- за ГБ Н/Д
Более 450 ТБ/месяц $- за ГБ $- за ГБ Н/Д
Более 500 ТБ/месяц $- за ГБ $- за ГБ Н/Д

Цены на транзакции

Горячий Холодный Архив
Операции записи* (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции чтения** (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции записи* (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции чтения** (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции записи* (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции чтения** (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции записи* (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- Н/Д
Операции чтения** (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- Н/Д
*К операциям записи можно отнести следующие вызовы API: AppendFile, CreateFilesystem, CreatePath, CreatePathFile, FlushFile, SetFileProperties, SetFilesystemProperties, RenameFile, RenamePathFile, CopyFile. **К операциям чтения можно отнести следующие вызовы API: ReadFile, ListFilesystemFile.
Горячий Холодный Архив
Операции записи* (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции чтения** (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции записи* (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции чтения** (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции записи* (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции чтения** (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- $-
Операции записи* (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- Н/Д
Операции чтения** (каждый элемент по 4 МБ, за 10 000 транзакций) $- $- Н/Д
*К операциям записи можно отнести следующие вызовы API: AppendFile, CreateFilesystem, CreatePath, CreatePathFile, FlushFile, SetFileProperties, SetFilesystemProperties, RenameFile, RenamePathFile, CopyFile. **К операциям чтения можно отнести следующие вызовы API: ReadFile, ListFilesystemFile.

Раннее удаление с архивного уровня

В дополнение к стоимости за ГБ и за месяц, на любые большие двоичные объекты, которые перемещаются на архивный уровень, распространяется период раннего удаления с архивного уровня продолжительностью 180 дней. Стоимость распределяется пропорционально. Например, если большой двоичный объект перемещен на архивный уровень, а потом удален или перемещен на "горячий" уровень по истечении 45 дней, с пользователя взимается плата за раннее удаление, эквивалентная 135 дням (180 – 45) хранения этого большого двоичного объекта на архивном уровне.

Единицы измерения для других операций и хранилища метаданных

Горячий Холодный Архив
Операции перечисления и создания контейнеров (за 10 000) $- $- $-
Итеративные операции записи (за 100 операций)* $- $- $-
Все остальные операции (за 10 000), кроме удаления, которое осуществляется бесплатно $- $- $-
Выборка данных (за ГБ) Бесплатные $- $-
Запись данных (за ГБ) Бесплатные Бесплатные Бесплатные
Хранилище метаданных (ГБ / месяц) Н/Д Н/Д Н/Д
Операции перечисления и создания контейнеров (за 10 000) $- $- $-
Итеративные операции записи (за 100 операций)* $- $- $-
Все остальные операции (за 10 000), кроме удаления, которое осуществляется бесплатно $- $- $-
Выборка данных (за ГБ) Бесплатные $- $-
Запись данных (за ГБ) Бесплатные Бесплатные Бесплатные
Хранилище метаданных (ГБ / месяц) Н/Д Н/Д Н/Д
Операции перечисления и создания контейнеров (за 10 000) $- $- $-
Итеративные операции записи (за 100 операций)* $- $- $-
Все остальные операции (за 10 000), кроме удаления, которое осуществляется бесплатно $- $- $-
Выборка данных (за ГБ) Бесплатные $- $-
Запись данных (за ГБ) Бесплатные Бесплатные Бесплатные
Хранилище метаданных (ГБ / месяц) Н/Д Н/Д Н/Д
Операции перечисления и создания контейнеров (за 10 000) $- $- Н/Д
Итеративные операции записи (за 100 операций)* $- $- Н/Д
Все остальные операции (за 10 000), кроме удаления, которое осуществляется бесплатно $- $- Н/Д
Выборка данных (за ГБ) Бесплатные $- Н/Д
Запись данных (за ГБ) Бесплатные Бесплатные Н/Д
Хранилище метаданных (ГБ / месяц) Н/Д Н/Д Н/Д
*К итеративным операциям записи можно отнести следующие вызовы API: RenameDirectory, RenamePath, RenamePathDir.
Горячий Холодный Архив
Операции перечисления и создания контейнеров (за 10 000) $- $- $-
Итеративные операции записи (за 100 операций)* $- $- $-
Все остальные операции (за 10 000), кроме удаления, которое осуществляется бесплатно $- $- $-
Выборка данных (за ГБ) Бесплатные $- $-
Запись данных (за ГБ) Бесплатные Бесплатные Бесплатные
Хранилище метаданных (ГБ / месяц) $- Н/Д Н/Д
Операции перечисления и создания контейнеров (за 10 000) $- $- $-
Итеративные операции записи (за 100 операций)* $- $- $-
Все остальные операции (за 10 000), кроме удаления, которое осуществляется бесплатно $- $- $-
Выборка данных (за ГБ) Бесплатные $- $-
Запись данных (за ГБ) Бесплатные Бесплатные Бесплатные
Хранилище метаданных (ГБ / месяц) $- Н/Д Н/Д
Операции перечисления и создания контейнеров (за 10 000) $- $- $-
Итеративные операции записи (за 100 операций)* $- $- $-
Все остальные операции (за 10 000), кроме удаления, которое осуществляется бесплатно $- $- $-
Выборка данных (за ГБ) Бесплатные $- $-
Запись данных (за ГБ) Бесплатные Бесплатные Бесплатные
Хранилище метаданных (ГБ / месяц) $- Н/Д Н/Д
Операции перечисления и создания контейнеров (за 10 000) $- $- Н/Д
Итеративные операции записи (за 100 операций)* $- $- Н/Д
Все остальные операции (за 10 000), кроме удаления, которое осуществляется бесплатно $- $- Н/Д
Выборка данных (за ГБ) Бесплатные $- Н/Д
Запись данных (за ГБ) Бесплатные Бесплатные Н/Д
Хранилище метаданных (ГБ / месяц) $- Н/Д Н/Д
*К итеративным операциям записи можно отнести следующие вызовы API: RenameDirectory, RenamePath, RenamePathDir.

Цены на передачу данных для ADLS 2-го поколения

При записи данных в учетные записи GRS эти данные будут реплицированы в другой регион Azure. Передача данных при георепликации оплачивается согласно пропускной способности, которая используется для репликации данных в другой регион Azure. Эта плата также взимается при изменении настроек репликации учетной записи с LRS на GRS или RA-GRS. Цены на передачу данных см. на странице цен на большие двоичные объекты.

Часто задаваемые вопросы

  • Хранилище Azure Data Lake Storage оптимизировано для выполнения аналитических рабочих нагрузок неструктурированных данных. Хранилище Azure Data Lake Storage 2-го поколения оптимизировано для быстрого ввода-вывода данных большого объема, благодаря чему увеличивается скорость выполнения аналитических рабочих нагрузок и снижается совокупная стоимость владения ими. При этом Azure Data Lake Storage 2-го поколения обеспечивает дополнительную гибкость при организации данных независимо от того, где они находятся (в неструктурированном или в иерархическом пространстве имен).

  • Используя иерархическое пространство имен, пользователи могут использовать структурированные папки и каталоги для систематизации данных. С помощью неструктурированного пространства имен файлы будут упорядочены в соответствии с плоской структурой, например, как в хранилище BLOB-объектов. Иерархическое пространство имен позволяет выполнять такие операции, как переименование и удаление папок за одну атомарную операцию, в то время как для неструктурированного пространства имен требуется несколько операций, пропорционально количеству объектов в структуре. Иерархические пространства имен хранят дополнительные метаданные для каталога и структуры папок. Однако по мере увеличения объема данных иерархические пространства имен сохраняют данные и, что более важно, обеспечивают лучшую производительность хранилища при выполнении аналитических заданий. Таким образом при выполнении аналитических заданий снижается общая совокупная стоимость владения.

    • Оплата счетов с использованием неструктурированного пространства имен

    Например, вы на протяжении месяца храните в Azure Data Lake Storage 2-го поколения данные размером 120 ТБ, используя при этом неструктурированное пространство имен горячего уровня. На протяжении текущего месяца было выполнено 100 млн операций и каждая из них занимала 6 МБ. В дополнение допустим, что из них 20 % операций записи, а остальные 80 % — операции чтения. И еще, предположим, в этом месяце было выполнено 10 000 переименований каталогов.

    При использовании неструктурированных пространств имен дополнительная плата за метаданные, связанные с файлами и папками, не взимается, поэтому плата будет взиматься только за 120 ТБ данных. Кроме того, поскольку для каждой операции требуется 6 МБ, с пользователя будет взиматься стоимость двух транзакций за операцию (4 МБ + 2 МБ), так как за каждые считанные или записанные 4 МБ данных, плата взимается как за одну транзакцию. Также стоить учитывать, что стоимость переименования каталогов указывается отдельно.

    Ниже представлен расчет общей стоимости.

    Использование ресурса Объем использования Цена Ежемесячные расходы
    Хранилище 120 ТБ

    $- за первые 50ТБ

    $- за следующие 450ТБ

    $- * 50 ТБ = $-

    $- * 70 ТБ = $-

    Итого $-
    Транзакции Операции записи: Каждые 4 МБ=2

    $- на 10 000

    2 * $- на 10 000 * 20млн = $-

    Операции чтения: Каждые 4 МБ=2

    $- на 10 000

    2 * $- на 10 000 * 80млн = $-

    Итого $-
    Переименование каталогов 10 000 $- на 100 $- на 100 * 10 000 = $-
    Общая ежемесячная стоимость:

    Хранилище

    Транзакции

    Переименование каталогов

    Общая ежемесячная стоимость

    $-

    $-

    $-

    $-


    • Оплата счетов в иерархически организованном пространстве имен

    Например, вы на протяжении месяца храните в Azure Data Lake Storage 2-го поколения данные размером 120 ТБ, используя при этом иерархическое пространство имен горячего уровня. На протяжении текущего месяца было выполнено 100 млн операций и каждая из них занимала 6 МБ. В дополнение допустим, что из них 20 % операций записи, а остальные 80 % — операции чтения. И еще, предположим, в этом месяце было выполнено 10 000 переименований каталогов.

    При использовании иерархического пространства имен будет взиматься дополнительная плата за метаданные, связанные с файлами и папками, поэтому плата будет немного больше чем за 120 ТБ данных. Кроме того, поскольку для каждой операции требуется 6 МБ, с пользователя будет взиматься стоимость двух транзакций за операцию (4 МБ + 2 МБ), так как за каждые считанные или записанные 4 МБ данных, плата взимается как за одну транзакцию. Также стоить учитывать, что стоимость переименования каталогов указывается отдельно.

    Ниже представлен расчет общей стоимости.

    Использование ресурса Объем использования Цена Ежемесячные расходы
    Хранилище 132 ТБ

    $- за первые 50ТБ

    $- за следующие 450ТБ

    $- * 50 ТБ = $-

    $- * 82 ТБ = $-

    Итого $-
    Транзакции Операции записи: Каждые 4 МБ=2

    $- на 10 000

    2 * $- на 10 000 * 20млн = $-

    Операции чтения: Каждые 4 МБ=2

    $- на 10 000

    2 * $- на 10 000 * 80млн = $-

    Итого $-
    Переименование каталогов 10 000 $- на 100 $- на 100 * 10 000 = $-
    Общая ежемесячная стоимость:

    Хранилище

    Транзакции

    Переименование каталогов

    Общая ежемесячная стоимость

    $-

    $-

    $-

    $-

  • Да, использование файлов большого размера является более экономичным и повышает производительность аналитики. Для файлов размером > 4 MБ Azure Data Lake Storage 2-го поколения предлагает более низкую цену за каждый блок данных размером 4 МБ, чтение которого осуществлялось после первых 4 МБ. Чтение одного файла размером 16 МБ будет дешевле, чем чтение 4 файлов по 4 МБ каждый. В обоих случаях общее число созданных транзакций равняется 4. Тем не менее, последние 12 МБ из файла размером 16 МБ, читаются как три транзакции, и являются более дешевыми, поэтому общая стоимость чтения 16 МБ-файла дешевле, чем чтение 4 файлов по 4 МБ каждый.

    Также важным фактором является то, что хранилище Azure Data Lake Storage 2-го поколения оптимизировано для ускоренного выполнения работы с файлами большого размера. Это означает, что при работе с файлами большого размера ваши задания в области аналитики будут выполняться быстрее, тем самым оптимизируя совокупную стоимость владения при выполнении заданий аналитики.

Поддержка и соглашение об уровне обслуживания

Ресурсы

Оцените ежемесячные затраты на службы Azure

Ознакомьтесь с часто задаваемыми вопросами по ценам Azure

Узнайте подробнее о Учетные записи хранения

Ознакомьтесь с техническими учебными пособиями, видеороликами и дополнительными ресурсами

Добавлено для расчета. Щелкните v для просмотра на калькуляторе

Обучайтесь и создавайте, используя деньги на счете ($200), а также продолжайте использовать продукты бесплатно