Ignora esplorazione
IN ANTEPRIMA

Anteprima pubblica: cache intelligente per for Apache Spark in Azure Synapse

Data di pubblicazione: 24 marzo, 2022

Riduci il tempo di elaborazione e migliora le prestazioni sulle query ripetute con la nuova cache intelligente per Apache Spark in Azure Synapse. A differenza della funzionalità di memorizzazione nella cache nativa di Apache Spark, la cache intelligente archivia automaticamente ogni operazione di lettura nello spazio di archiviazione della cache allocato, consentendo quindi il rilevamento delle modifiche al file sottostante e l'aggiornamento dei file per fornire i dati più recenti.

La cache intelligente funziona senza problemi dietro le quinte e memorizza nella cache i dati per contribuire all'accelerazione dell'esecuzione delle operazioni di lettura di Apache Spark dal data lake di Azure Data Lake Storage Gen2. Rileva inoltre automaticamente le modifiche ai file sottostanti e aggiornerà automaticamente i file nella cache, in modo da fornirti i dati più recenti. Quando le dimensioni della cache raggiungono il rispettivo limite, la cache rilascerà automaticamente i dati meno letti per liberare spazio per i dati più recenti.

Per scoprire di più, esplora la documentazione.

  • Features