Offentlig förhandsversion: Intelligent cache för Apache Spark i Azure Synapse
Publiceringsdatum: 24 mars, 2022
Minska bearbetningstiden och öka prestandan för upprepade frågor med den nya intelligenta cachen för Apache Spark i Azure Synapse. Till skillnad från den inbyggda cachelagringsfunktionen i Apache Spark lagrar den intelligenta cachen automatiskt varje läsning inom det allokerade cachelagringsutrymmet, vilket gör det möjligt att identifiera underliggande filändringar och uppdatera filerna som tillhandahåller de senaste data.
Den intelligenta cachen körs smidigt i bakgrunden och cachelagrar data för att påskynda körningen av Apache Spark medan den läser från din ADLS Gen2-datasjö. Den identifierar också automatiskt ändringar i de underliggande filerna och uppdaterar automatiskt filerna i cacheminnet, vilket ger dig de senaste data. När cachestorleken når gränsen släpper cacheminnet automatiskt minst lästa data för att frigöra utrymme för nyare data.
Mer information finns i vår dokumentation.