일반 공급: Azure Synapse Analytics Spark 성능을 최대 77% 향상

Azure Analytics Spark 성능을 개선하기 위해 부단히 노력하고 있습니다. 진행 중인 변경 작업을 통해 Spark 성능이 최대 77%까지 향상할 것입니다. 

1TB TPC-H 업계 벤치마크를 사용하여 테스트했을 때 최대 77%까지 성능이 향상될 것으로 보입니다. 워크로드가 TPC-H 벤치마크와 다르게 수행될 수 있지만 성능이 모두 향상될 것으로 예상합니다. 최신 Azure v5 VM으로 전환하면서 CPU 성능이 향상되었고, 임시 SSD 처리량이 증가했으며, 더 우수한 원격 스토리지 IOPS를 제공한 덕분에 이러한 Spark 성능 향상이 이루어졌습니다. 

전 세계에 40개 이상의 지역에서 지역별로 이 변경 작업을 시행할 예정입니다. 캐나다 중부부터 변경 작업이 시작됩니다. 변경 작업을 전 세계에 출시하려면 몇 달이 걸릴 것입니다. 업데이트하는 지역을 각각 게시할 예정이며 지역마다 무료로 제공되는 성능 향상이 자동 적용됩니다. 첫 번째 지역은 캐나다 중부가 될 것입니다.

사용자가 수행할 작업은 없습니다. 지역마다 업그레이드가 완료되면 작업 시간을 단축할 수 있을 것입니다. 작업이 완료될 때까지 경과된 시간보다 비용 절감이 더 중요한 경우 노드 크기나 노드 수를 줄일 수 있습니다.

Spark 성능 최적화와 Apache Spark 풀 구성에 대해 자세히 알아봅니다.