Os trabalhos do Apache Spark contam com a melhoria na velocidade de até nove vezes com o Cache de E/S do HDInsight
Data da publicação: 31 outubro, 2018
O Cache de E/S do HDInsight já está disponível na versão prévia dos clusters mais recentes do Apache Spark para Azure HDInsight. Uma vez habilitado, ele melhora o desempenho dos trabalhos do Spark de forma totalmente transparente, sem qualquer alteração nos trabalhos necessários, e pode fornecer uma melhoria de até nove vezes no tempo de execução da consulta. Isso oferece uma excelente relação custo-benefício de implantações do Spark baseadas em nuvem. O Cache de E/S do HDInsight é um novo recurso de cache de dados transparente, baseada no RubiX, que usa avanços recentes na tecnologia SSD para tornar o gerenciamento de memória explícito desnecessário e permite a utilização ideal de recursos para melhorar o desempenho.