Szacowany czas czytania: 7 minuti
Jeśli dane pochodzą z różnych źródeł, niezależnie od tego, czy jest to CRM, kanały mediów społecznościowych czy dane o zdarzeniach behawioralnych. Dane te są prawdopodobnie przechowywane w różnych narzędziach i systemach w ramach stosu technologii (takich jak starsze systemy, narzędzia oparte na chmurze i hurtownia danych o jezioro).
Pierwszym krokiem w orkiestracji danych jest zebranie i uporządkowanie danych ze wszystkich różnych źródeł oraz zapewnienie, że są one poprawnie sformatowane pod kątem docelowego miejsca docelowego. Co prowadzi nas do: transformacji.
Dane są dostępne w kilku różnych formatach. Może być ustrukturyzowane, nieustrukturyzowane lub częściowo ustrukturyzowane, albo to samo wydarzenie może mieć inną konwencję nazewnictwa między dwoma wewnętrznymi zespołami. Na przykład jeden system może zbierać i przechowywać datę jako 21 kwietnia 2022 r., a inny może przechowywać ją w formacie liczbowym 20220421.
Aby wszystkie te dane miały sens, firmy często muszą przekształcić je w standardowy format. Orkiestracja danych może pomóc zmniejszyć obciążenie związane z ręcznym uzgadnianiem wszystkich tych danych i stosowaniem przekształceń w oparciu o zasady zarządzania danymi i plan monitorowania organizacji.
Kluczową częścią orkiestracji danych jest udostępnianie danych do aktywacji. Dzieje się tak, gdy czyste, skonsolidowane dane są wysyłane do dalszych narzędzi w celu natychmiastowego użycia (na przykład podczas tworzenia odbiorców kampanii lub aktualizowania pulpitu nawigacyjnego analizy biznesowej).
Orkiestracja danych polega zasadniczo na usuwaniu odizolowanych danych i pofragmentowanych systemów. Alluxio docenia że technologia danych ulega poważnym zmianom co 3–8 lat. Oznacza to, że 21-letnia firma mogła od początku przejść przez 7 różnych systemów zarządzania danymi.
Orkiestracja danych pomaga także zachować zgodność z przepisami dotyczącymi ochrony danych, usunąć wąskie gardła w danych i egzekwować zarządzanie danymi – to tylko trzy (spośród wielu) dobrych powodów, aby ją wdrożyć.
Przepisy dotyczące prywatności danych, takie jak RODO i CCPA, zawierają rygorystyczne wytyczne dotyczące gromadzenia, wykorzystywania i przechowywania danych. Częścią zgodności jest zapewnienie konsumentom możliwości rezygnacji ze zbierania danych lub zażądania, aby Twoja firma usunęła wszystkie ich dane osobowe. Jeśli nie wiesz, gdzie przechowywane są Twoje dane i kto ma do nich dostęp, spełnienie tego wymagania może być trudne.
Od czasu wejścia w życie RODO otrzymaliśmy miliony żądań usunięcia danych. Niezbędne jest solidne zrozumienie całego cyklu życia dać żeby mieć pewność, że nic nie wycieknie.
Wąskie gardła stanowią ciągłe wyzwanie bez orkiestracji danych. Załóżmy, że masz firmę posiadającą wiele systemów przechowywania danych i chcesz uzyskać informacje. Osoba odpowiedzialna za wysyłanie zapytań do tych systemów prawdopodobnie będzie miała wiele żądań do przejrzenia, co może powodować opóźnienia między zespołami że potrzebują danych i tych, którzy się tam znajdują odbierać skutecznie, co z kolei może sprawić, że informacje staną się nieaktualne.
W dobrze zorganizowanym środowisku ten typ uruchamiania i zatrzymywania zostałby wyeliminowany. Twoje dane zostaną już dostarczone do dalszych narzędzi w celu aktywacji (i dane te zostaną ustandaryzowane, co oznacza, że możesz mieć pewność co do ich jakości).
Zarządzanie danymi jest trudne, gdy dane są rozproszone w wielu systemach. Firmy nie mają pełnego obrazu cyklu życia danych i nie mają pewności, jakie dane są przechowywane (np gołąb) stwarza luki w zabezpieczeniach, takie jak niewystarczająca ochrona danych osobowych.
Orkiestracja danych pomaga rozwiązać ten problem, oferując większą przejrzystość sposobu zarządzania danymi. Umożliwia to firmom proaktywne blokowanie błędnych danych, zanim dotrą one do baz danych lub będą miały wpływ na raportowanie, a także ustawianie uprawnień dostępu do danych.
Podczas próby wdrożenia orkiestracji danych może pojawić się kilka wyzwań. Oto najczęstsze z nich, o których warto wiedzieć i jak ich uniknąć.
Silosy danych są częstym, jeśli nie szkodliwym zjawiskiem wśród firm. W miarę ewolucji stosów technologii i różnych zespołów zajmujących się różnymi aspektami obsługi klienta zbyt łatwo jest zablokować dane w różnych narzędziach i systemach. Rezultatem jest jednak niepełne zrozumienie wyników firmy, począwszy od słabych punktów w podróży klienta po nieufność co do dokładności analiz i raportowania.
Firmy zawsze będą miały dane przepływające z wielu punktów kontaktu do różnych narzędzi. Jednak rozbicie silosów jest niezbędne, jeśli firmy te chcą uzyskać wartość ze swoich danych.
W ostatnich latach pojawiły się pewne trendy dotyczące sposobu, w jaki firmy zarządzają przepływem i aktywacją swoich danych. Przykładem tego jest przetwarzanie danych w czasie rzeczywistym, czyli przetwarzanie danych w ciągu milisekund od wygenerowania. Dane w czasie rzeczywistym stały się kluczowe we wszystkich branżach, odgrywając kluczową rolęInternet przedmiotów (na przykład czujniki zbliżeniowe w samochodach), opieka zdrowotna, zarządzanie łańcuchem dostaw, wykrywanie oszustw i niemal natychmiastowa personalizacja. Szczególnie dzięki postępom w uczeniu maszynowym i sztucznej inteligencji dane w czasie rzeczywistym umożliwiają algorytmom isztuczna inteligencja uczyć się w szybszym tempie.
Kolejnym trendem było przejście w stronę technologii opartych na chmura. Chociaż niektóre firmy całkowicie przeniosły się na chmurainne mogą nadal korzystać z kombinacji systemów lokalnych i rozwiązań opartych na chmurze.
Następnie następuje ewolucja sposobu tworzenia i wdrażania oprogramowania, która wpływa na sposób przeprowadzania orkiestracji danych.
– Brak uwzględnienia czyszczenia i walidacji danych
– Nie testowanie przepływów pracy w celu zapewnienia płynnych i zoptymalizowanych procesów
– Opóźnione reakcje na problemy takie jak niespójności danych, błędy serwera, wąskie gardła
– Brak jasnej dokumentacji dotyczącej mapowania danych, pochodzenia danych i planu monitorowania
Aby zmierzyć zwrot z inwestycji w orkiestrację danych:
– Zrozumienie podstawowej wydajności
– Miej jasny zestaw celów, wskaźników KPI i założeń dotyczących orkiestracji danych
– Oblicz całkowity koszt zastosowanej technologii wraz z czasem i zasobami wewnętrznymi
– Mierz ważne wskaźniki, takie jak zaoszczędzony czas, szybkość przetwarzania i dostępność danych itp.
BlogInnovazione.it
Rozwijanie umiejętności motorycznych poprzez kolorowanie przygotowuje dzieci do bardziej złożonych umiejętności, takich jak pisanie. Kolorować…
Sektor morski to prawdziwa światowa potęga gospodarcza, która osiągnęła 150-miliardowy rynek...
W ubiegły poniedziałek Financial Times ogłosił zawarcie umowy z OpenAI. FT udziela licencji na swoje światowej klasy dziennikarstwo…
Miliony ludzi płacą za usługi przesyłania strumieniowego, płacąc miesięczne opłaty abonamentowe. Powszechnie panuje opinia, że…
