Ускоренная запись HDInsight HBase теперь общедоступна

Ускоренная запись HDInsight HBase теперь общедоступна.

Главное

• Повысьте уровень производительности записи Apache HBase и Phoenix в 9 раз.
• Лучше всего подходит для рабочих нагрузок с высокой пропускной способностью и низкой задержкой, работающих в Azure Data Lake Storage 2-го поколения и хранилище BLOB-объектов Azure.

Разделение вычислительных ресурсов и хранилищ в кластерах HDInsight обеспечивает клиентам преимущества масштабируемости, эластичности, гибкости и экономии. Однако иногда это может повлечь за собой затраты, связанные с большими задержками из-за сетевых уровней.

В текущей реализации журналы упреждающего протоколирования (WAL) в кластере HDInsight HBase хранятся в виде страничных BLOB-объектов в Службе хранилища Azure категории "Стандартный". Таким образом, файловая система Azure является одним из немногих облачных предложений, которые удовлетворяют требования согласованности для журналов упреждающего протоколирования HBase.

Эта архитектура идеально подходит для большинства приложений, но она может не подходить для критически важных приложений, которым требуется постоянная низкая задержка и высокая пропускная способность операций ввода-вывода, так как непостоянные задержки для записей WAL могут ограничивать общую производительность записи в кластерах HDInsight HBase.

Функция ускоренной записи в кластере HDInsight HBase подключает управляемый диск SSD (цен. категория "Премиум") к каждому серверу региона (рабочему узлу). Журналы упреждающего протоколирования настроены для записи в распределенную файловую систему Hadoop (HDFS), подключенную к управляемым дискам категории "Премиум" вместо стандартных страничных BLOB-объектов Azure. Управляемые диски категории "Премиум" созданы на основе SSD. Они обеспечивают высокий уровень производительности операций ввода-вывода с отказоустойчивостью. Использование управляемых дисков категории "Премиум" для WAL позволяет отделить хранилище журналов упреждающего протоколирования от хранилища данных Apache HBase.

Дополнительные сведения см. в статье Azure HDInsight Accelerated Writes for Apache HBase (Ускоренные операции записи Azure HDInsight для Apache HBase).