Pré-visualização pública: armazenamento de conjunto elástico do Spark para o Azure Synapse Analytics
Data de publicação: 28 julho, 2022
Agora, os conjuntos do Spark para o Azure Synapse Analytics suportam o armazenamento de conjunto elástico. O Apache Spark no Azure Synapse Analytics utiliza o armazenamento de discos temporário enquanto o conjunto do Spark é instanciado. Para muitos trabalhos do Spark, é difícil calcular os requisitos do armazenamento de conjuntos, o que pode fazer com que alguns trabalhos do Spark falhem se o armazenamento temporário estiver esgotado. Hoje, estamos a ativar o armazenamento de conjunto elástico, o qual permite que o motor do Spark monitorize o armazenamento temporário de nós de trabalho e ligue discos adicionais, se necessário. Não precisa de realizar qualquer ação, além de que, por conseguinte, deverá ver menos falhas de trabalhos.