Firma Dell Technologies wprowadziła rozwiązanie Dell Validated Designs for Analytics – Data Lakehouse, które umożliwia przedsiębiorstwom łączenie jezior danych i magazynów danych, co przekłada się na lepszą jakość danych, wydajność, bezpieczeństwo i zarządzanie wszystkimi typami danych dzięki samoobsłudze na żądanie.
Jezioro danych
Dell Data Lakehouse umożliwia ewolucję zarządzania danymi, od wyizolowanych, sztywnych, kosztownych i powolnych systemów do zunifikowanych, które umożliwiają wykorzystanie Business Intelligence (BI), analityki, aplikacji do przetwarzania danych w czasie rzeczywistym, analizy danych i uczenia maszynowego (ML). Zweryfikowane rozwiązanie Data Lakehouse obejmuje urządzenia z portfolio Dell, w tym PowerEdge, PowerScale, ECS Object Storage i PowerSwitch.
To jednak nie tylko sprzęt – infrastruktura opiera się na platformach Apache Spark i Kafka z technologiami Delta Lake oraz platformą Robin Cloud-Native Platform (CNP). Po połączeniu wszystkich tych elementów, rozwiązanie to ma na celu wykorzystanie większej ilości danych do transformacji spostrzeżeń w całej organizacji.
Według wpisu na blogu Chhandomaya Mandala, dyrektora ds. marketingu rozwiązań ISG w firmie Dell, „Tradycyjne systemy zarządzania danymi, takie jak hurtownie danych, są używane od dziesięcioleci do przechowywania ustrukturyzowanych danych i udostępniania ich do celów analitycznych. Jednak hurtownie danych nie są przygotowane do obsługi rosnącej różnorodności danych. Firma Dell opracowała referencyjny projekt architektury dla połączonego jeziora danych/hurtowni danych, wykorzystując oprogramowanie partnerów zewnętrznych oraz własny serwer, pamięć masową i sprzęt sieciowy – tekst, obrazy, wideo, Internet rzeczy (IoT) – ani nie obsługują algorytmów sztucznej inteligencji (AI) i uczenia maszynowego (ML) wymagających bezpośredniego dostępu do danych”.
Jeziora danych miały pomóc w rozwiązaniu tych problemów, umożliwiając przedsiębiorstwom pozyskiwanie danych ustrukturyzowanych, nieustrukturyzowanych i częściowo ustrukturyzowanych w sposób bardziej elastyczny i opłacalny niż tradycyjne magazyny danych. Organizacje korzystają z jeziora danych w połączeniu z magazynem danych, przechowując dane w jeziorze, a następnie kopiując je do magazynu, co zwiększa ich dostępność, a jednocześnie zwiększa złożoność i koszty w środowisku analitycznym.
Gdy organizacje lepiej opanują tę ogromną ilość danych, Data Lakehouse obsługuje różnorodne zastosowania. Głównymi kandydatami są: business intelligence (BI), analityka, aplikacje do przetwarzania danych w czasie rzeczywistym, nauka o danych i uczenie maszynowe. Dell mniej więcej podkreśla, że po opanowaniu rozległych danych znacznie łatwiej jest czerpać korzyści biznesowe.
Specyfikacje techniczne Dell Data Lakehouse
Dell Data Lakehouse łączy w sobie wiele elementów oprogramowania, ale ostatecznie stanowi sprzętowo zintegrowaną infrastrukturę. Dell zebrał niektóre ze swoich najlepszych ofert sprzętowych, aby stworzyć ten projekt.
Poniższa tabela przedstawia kluczowe komponenty systemu, w tym węzły robocze obsługujące procesory graficzne (GPU). Wiele organizacji będzie chciało pójść tą drogą, ponieważ wiele analiz przeprowadzanych na tych danych może skorzystać ze zwiększonej mocy obliczeniowej, jaką oferują procesory graficzne (GPU).
Rozwiązanie Dell Validated Designs for Analytics – Data Lakehouse jest już dostępne.
Amazon