Data Factory で新しい階層データ処理と、複雑な結合を実現する柔軟性が追加されました
公開日: 5月 01, 2020
Data Factory の最新の更新内容は以下のとおりです。
- データ フローでの階層データ モデリングが拡張され、フラット化、collect 集計、更新されたシンク マッピングが可能になりました。また、Azure SQL DB と CosmosDB を使用してリレーショナル型から階層型に移行するときに、これらの機能を使用する方法について、新しいチュートリアルが公開されました。
- 結合変換、参照変換、存在変換に追加される非等結合サポートが数週間以内に導入されます。これにより、UI から ADF のすべての結合タイプに非等結合を追加し、追加の等/非等型で「AND」条件を追加できるようになります。
- ADF の結合、存在、参照には既に更新が導入されており、[最適化] タブが更新されています。[ブロードキャスト] オプションを使用して結合を実行するときに、実行ノードへのネイティブ Spark データのプッシュダウンをオフにできるようになりました。既定値は [自動] ですが、[固定] を選択すると、左側または右側のみをブロードキャストすることで、Spark の既定のデータ フロー動作をオーバーライドできます。
詳細については、こちらのブログを参照してください。