Data Factory에서 복잡한 조인을 위한 새로운 유연성과 새로운 계층적 데이터 처리 기능 추가

Data Factory의 최신 업데이트 내용은 다음과 같습니다.

• 데이터 흐름의 계층적 데이터 모델링이 평면화, 집계 수집, 업데이트된 싱크 매핑 등으로 확장되었습니다. 또한 Azure SQL DB 및 CosmosDB를 사용하여 관계형에서 계층 구조로 이동할 때 해당 기능을 사용하는 방법에 대한 새 자습서를 게시했습니다.  
• 조인, 조회 및 있음 변환에 추가되는 비동등 조인 지원은 다음 주에 제공될 예정입니다. 이제 UI의 모든 ADF 조인 형식에 비동등 조인을 추가하고 동등/비동등 형식으로 “and” 조건을 추가할 수 있습니다.
• 이미 ADF에 제공된 조인, 있음 및 조회 업데이트는 최적화 탭의 업데이트입니다. 이제 브로드캐스트 옵션을 사용하여 조인을 수행할 때 기본 Spark 데이터 푸시다운을 실행 노드로 전환할 수 있습니다. 기본값은 자동이며, “고정”을 사용하면 Spark에서 왼쪽 또는 오른쪽만 브로드캐스팅하여 기본 데이터 흐름 동작을 재정의할 수 있습니다.

블로그를 읽고 자세히 알아보세요.