Data-driven? Yes, please!

Budowanie strategii firmy w oparciu o dane nigdy nie było tak proste jak dziś. Technologia osiągnęła taki poziom, że wiele rzeczy po prostu się da – przekonuje Marcin Żukowski, współzałożyciel firmy Snowflake.

Snowflake to założony w 2012 w kalifornijskim San Mateo producent chmurowych rozwiązań do przetwarzania danych. Platforma Snowflake, będąca początkowo hurtownią danych świadczoną w modelu usługowym, z biegiem czasu obrastała w dodatkowe funkcjonalności, m.in. z takich obszarów jak data engineering i data science. Obecnie przetwarza ok. 1 mld zapytań dziennie.

Atrybutem Snowflake’a jest Data Cloud, globalna platforma wymiany danych między organizacjami użytkującymi narzędzie. Umożliwia firmom udostępnianie danych w ekosystemie partnerów oraz dostęp do danych pochodzących ze źródeł zewnętrznych.

Spółka w 2020 z przytupem zadebiutowała na Wall Street. Prawie 3,4 mld dolarów wpływów w ramach pierwszej oferty publicznej, przeprowadzonej w połowie września ub. roku, to najlepsze IPO spółki produkującej oprogramowanie w historii notowań na nowojorskim parkiecie. Snowflake zatrudnia dziś ponad 2000 osób a z jej rozwiązania korzysta ponad 3500 przedsiębiorstw.

Co z tym data-driven

Organizacje, które chcą podejmować świadome decyzje biznesowe w oparciu o posiadane zasoby danych, mierzą się z kilkoma wyzwaniami – mówił Marcin Żukowski, gość specjalny czwartego tegorocznego spotkania społeczności CIONET Polska, „Being Data Driven”.

Przede wszystkim, znacząco wzrosła ilość wytwarzanych dziś danych – w dodatku generują je nie tylko użytkownicy, ale i urządzenia; jest też coraz więcej danych nieustrukturyzowanych. Powiększył się katalog źródeł danych – do, w przeszłości nielicznych, źródeł wewnętrznych, takich jak firmowe systemy informatyczne, dołączyły źródła zewnętrzne: partnerzy, dostawcy technologii, klienci, konkurenci, domena publiczna… Takiej ilości danych nie możemy lub nie jesteśmy w stanie skopiować i przechowywać. To sprawia, że hurtownie danych stają się ważniejsze niż kiedykolwiek.

Jednocześnie dostępu do tych danych oczekuje coraz więcej użytkowników, a sam dostęp wymagany jest w czasie rzeczywistym. Użytkownicy od zawsze oczekiwali jak najszybszego dostępu do danych.

Dziś ma to tym większe znaczenie, że decyzje biznesowe podejmowane są nie na danych sprzed kilku dni, tylko sprzed chwili. Iteracyjna obróbka danych wymaga szybkiego przetwarzania – podkreślał Żukowski.

Pomoc w chmurze

Odpowiedzią na ten problemy jest chmura: opłacalny i elastyczny system przechowywania. Rozwój technologii sprawił, że powstało wiele doskonałych narzędzi, zwłaszcza z zakresu analityki i Business Intelligence. W dziedzinie systemów bazodanowych w ostatnich latach nastąpiła prawdziwa rewolucja – narzędzia te oferują znacznie wyższą wydajność przetwarzania zapytań, w dodatku mogą pracować na danych różnych typów. Dzięki temu użytkowanie i przetwarzanie danych stało się dużo łatwiejsze.

Elastyczność chmury sprawia, że nowoczesne systemy zarządzania danymi (chmurowe hurtownie, takie jak Snowflake, ale i usługi data querying) są w stanie wspierać dowolną ilość użytkowników. Ci zaś nie dość, że mają dostęp do tych samych danych, to pracując na nich niezależnie nie przeszkadzają sobie, co nie było takie oczywiste w środowiskach on-premise – wskazuje Żukowski.

Na podstawie danych możemy rozpoznawać i rozwiązywać problemy, o których nawet jeszcze nie wiemy, że istnieją. Skuteczna analityka wymaga jednak przechowywania wszystkich danych, gdyż powinno się ją prowadzić na dwóch różnych poziomach – wyszukiwania hot spotów („trendów”) w dużych zbiorach danych oraz pojedynczych zapytań i zdarzeń.

Bogatsi w wiedzę analityczną, możemy w następstwie projektować rozwiązania naprawcze a nawet, dzięki specjalnym metrykom, oceniać ich potencjalną skuteczność przed implementacją – mówi przedstawiciel Snowflake’a.