이제 Azure Databricks 델타가 미리 보기로 제공됨

이제 델타 기능이 Azure Databricks의 프리미엄 SKU에서 추가 비용 없이 미리 보기로 제공됩니다. 고객은 델타를 사용하여 작업 및 쿼리에서 더욱 높은 데이터 안정성과 성능을 얻고 데이터 파이프라인을 단순화할 수 있습니다.

분석되는 데이터의 볼륨이 폭발적으로 증가하고, 다양한 데이터 형식이 확산되고, 실시간 분석이 필요해짐에 따라 데이터 파이프라인이 매우 복잡해지고 있습니다. 대부분 고객은 불규칙한 스키마 및 쓰기 충돌 같은 문제를 처리하기 위해 각 단계에서 복원력이 필요한 다단계 파이프라인을 빌드합니다. 이와 같은 솔루션의 복잡성으로 인해 성능 문제가 대규모로 발생합니다. Azure Databricks의 델타를 통해 고객은 파이프라인을 크게 단순화할 수 있습니다.

델타는 Azure Databricks의 트랜잭션 스토리지 계층입니다. Spark 테이블의 최적화 버전인 델타 테이블에서 데이터를 읽고 쓰는 방식으로 델타와 상호 작용할 수 있습니다. 델타는 데이터를 Parquet 형식으로 저장하고 Spark 테이블을 통해 추가 기능을 제공하는 메타데이터를 추가합니다. 델타는 Azure Databricks에서 Spark 작업 및 쿼리에 대한 향상된 안정성 및 성능을 제공합니다. 또한 델타는 데이터 일관성을 제공하면서 일괄 작업 및 스트리밍 작업이 둘 다 동일한 테이블을 사용하도록 하여 데이터 파이프라인을 단순화하므로, 고객은 대규모로 고성능 분석 솔루션을 빌드하는 작업을 단순화할 수 있습니다.

최소한의 코드 변경으로 Azure Databricks에서 델타를 활용하세요. 이 기능은 고객이 Spark 테이블에 사용하는 Spark의 모든 기존 API에서 작동합니다.

Azure Databricks에서 델타를 시작하려면 Databricks 델타 빠른 시작 Notebook을 방문하고 델타 설명서에서 Azure Databricks 델타와 그 기능에 대해 자세히 알아보세요.