Data Lake

Pierwsza usługa analizy w chmurze, która umożliwia proste opracowywanie i uruchamianie przekształceń i programów przetwarzania równoległego na ogromną skalę w językach U-SQL, R, Python i .NET dla petabajtów danych. Brak infrastruktury do zarządzania, przetwarzanie danych na żądanie, natychmiastowe skalowanie i opłaty tylko za poszczególne zadania. Dowiedz się więcej

Pierwsza usługa data lake w chmurze dla przedsiębiorstw, która jest bezpieczna, całkowicie skalowalna i stworzona z myślą o otwartym standardzie HDFS. Brak limitu rozmiaru danych oraz możliwość uruchamiania analiz równoległych — możesz odblokować wartość wszystkich niestrukturalnych, częściowo strukturalnych i strukturalnych danych. Dowiedz się więcej

Znalezienie odpowiednich narzędzi do zaprojektowania i dostrojenia zapytań dla danych big data może być trudne. Usługa Data Lake ułatwia to dzięki zaawansowanej integracji z programem Visual Studio oraz usługami Eclipse i IntelliJ, która pozwala na korzystanie ze znajomych narzędzi do uruchamiania, debugowania i dostrajania kodu. Wizualizacje zadań technologii U-SQL, Apache Spark, Apache Hive i Apache Storm pozwalają zobaczyć, jak kod jest wykonywany na dużą skalę, oraz określić wąskie gardła wydajności i zoptymalizować koszty, co ułatwia dostrajanie zapytań. Nasze środowisko wykonywania umożliwia aktywne analizowanie Twoich programów podczas ich działania i oferuje rekomendacje dotyczące zwiększania wydajności i zmniejszania kosztów. Inżynierowie przetwarzający dane, administratorzy baz danych i architekci mogą używać swoich umiejętności z zakresu technologii SQL, Apache Hadoop, Apache Spark, R, Python, Java i .NET, dzięki czemu mogą pracować efektywnie od pierwszego dnia.

Jednym z największych wyzwań dotyczących rozwiązań obsługujących dane big data jest integracja z istniejącymi technologiami IT. Usługa Data Lake to kluczowa część pakietu Cortana Intelligence współdziałająca z usługami Azure Synapse Analytics, Power BI i Data Factory. Stanowi kompletną platformę do obsługi danych big data i zaawansowanych analiz w chmurze, która ułatwia wszystko — od przygotowania danych do interaktywnych analiz zestawów danych na dużą skalę. W usłudze Data Lake Analytics możesz wykonywać czynności związane ze wszystkimi swoimi danymi dzięki funkcji zoptymalizowanej wirtualizacji danych w źródłach relacyjnych, takich jak usługa Azure SQL Server na maszynach wirtualnych, Azure SQL Database i Azure Synapse Analytics. Zapytania są automatycznie optymalizowane przez przeniesienie przetwarzania bliżej źródła danych bez konieczności przenoszenia danych, co pozwala zmaksymalizować wydajność i zminimalizować opóźnienia. I w końcu, ponieważ usługa Data Lake znajduje się na platformie Azure, możesz połączyć ją z dowolnymi danymi wygenerowanymi przez aplikacje lub odebranymi przez urządzenia w ramach Internetu rzeczy.

Usługa Data Lake została zaprojektowana od samych podstaw pod kątem skalowalności i wydajności w chmurze. Dzięki usłudze Azure Data Lake Store Twoja organizacja może analizować wszystkie dane w jednym miejscu, bez sztucznych ograniczeń. Usługa Data Lake Store może przechowywać biliony plików, przy czym pojedynczy plik może mieć rozmiar przekraczający petabajt, czyli 200 razy więcej niż w przypadku innych magazynów w chmurze. Oznacza to, że nie musisz modyfikować kodu przy wzroście lub spadku ilości przechowywanych danych albo użytej mocy obliczeniowej. Dzięki temu możesz skoncentrować się tylko na logice biznesowej, a nie na sposobie przetwarzania i przechowywania dużych zestawów danych. Usługa Data Lake usuwa także złożoności zazwyczaj związane z danymi big data w chmurze, a Ty masz pewność, że będzie ona spełniać Twoje bieżące i przyszłe potrzeby biznesowe.

Usługa Data Lake to ekonomiczne rozwiązanie do uruchamiania obciążeń danych big data. Podczas przetwarzania danych możesz wybrać między klastrami na żądanie a modelem płatności za zadania. W obu przypadkach nie jest wymagany sprzęt, licencje ani umowy pomocy technicznej dla poszczególnych usług. System skaluje się w górę lub w dół zgodnie z Twoimi potrzebami biznesowymi, co oznacza, że nigdy nie zapłacisz za więcej, niż potrzebujesz. Umożliwia także niezależne skalowanie magazynu i mocy obliczeniowej, dzięki czemu jest bardziej elastyczny ekonomicznie niż tradycyjne rozwiązania do obsługi danych big data. I w końcu minimalizuje potrzebę zatrudnienia wyspecjalizowanych zespołów, które zazwyczaj są potrzebne do obsługi infrastruktury przetwarzającej dane big data. Usługa Data Lake minimalizuje Twoje koszty, maksymalizując jednocześnie zwrot z inwestycji w dane. Ostatnie badanie wykazało, że usługa HDInsight zapewnia o 63% niższy całkowity koszt posiadania w porównaniu z lokalnym wdrażaniem platformy Hadoop w ciągu pięciu lat.

Usługa Data Lake jest w pełni zarządzana i wspierana przez firmę Microsoft oraz objęta umową SLA klasy korporacyjnej i pomocą techniczną. Dzięki całodobowej dostępności pomocy technicznej przez 7 dni w tygodniu możesz skontaktować się z nami, aby uzyskać pomoc w zakresie wyzwań dotyczących całego rozwiązania do obsługi danych big data. Nasz zespół monitoruje Twoje wdrożenie, dzięki czemu nie musisz tego robić samodzielnie, gwarantując, że będzie działać bez przerw. Usługa Data Lake chroni Twoje zasoby danych oraz z łatwością rozszerza lokalne mechanizmy kontroli bezpieczeństwa i zarządzania do wykorzystania w chmurze. Dane są zawsze szyfrowane; w ruchu przy użyciu protokołu SSL oraz w spoczynku przy użyciu kluczy opartych na module HSM zarządzanych przez usługę lub użytkownika w usłudze Azure Key Vault. Usługa Azure Active Directory zapewnia dostępność różnorodnych funkcji, takich jak logowanie jednokrotne (SSO), uwierzytelnianie wieloskładnikowe i płynne zarządzanie milionami tożsamości. Możesz autoryzować użytkowników i grupy przy użyciu dostosowanych list ACL opartych na identyfikatorach POSIX dla wszystkich danych w usłudze Store, co umożliwia kontrolę dostępu opartą na rolach. Możesz również spełniać wymagania z zakresu bezpieczeństwa i zgodności, przeprowadzając inspekcję dla każdego dostępu lub zmiany konfiguracji w systemie.