Data Lineage – dlaczego warto znać Pochodzenie Danych?

Wyobraź sobie jednak, że na moment wcielasz się w rolę kontrolera lotów w wieży kontroli ruchu lotniczego – obsługujesz radary, systemy mierzące warunki meteorologiczne, przekazujesz pilotom wskazówki nawigacyjne, dbasz o bezpieczeństwo ruchu powietrznego i naziemnego. Czy dostrzegasz podobieństwa tych dwóch zajęć? Czy nie wydają Ci się zbieżne? Czy można w obu przypadkach pomóc sobie w pracy konkretnymi umiejętnościami i narzędziami? Wyjaśniamy!

W obu przypadkach – na stanowisku specjalisty od danych i kontrolera ruchu lotniczego – należy:

• Obsłużyć wiele próśb i żądań od wielu ludzi (działów) jednocześnie.
• Działać błyskawicznie i elastycznie. Po obsłużeniu jednego zapytania natychmiast pojawia się kolejne.
• Być odpornym na stres, gdyż bardzo często zadaniom towarzyszy presja czasu.
• Priorytetyzować zapytania, bo tak naprawdę wszystkie są z priorytetem: „high”.
• Udzielać bardzo dokładnych, rzeczowych odpowiedzi.
• Każda niewłaściwa lub spóźniona komenda (decyzja) to dodatkowe koszty dla firmy.

Przykładowo, kontroler lotów nie może zezwolić na lądowanie w tym samym czasie na tym samym pasie dwóch samolotów, ponieważ spowoduje zagrożenie życia dla pasażerów. Podobnie nieprecyzyjna odpowiedź specjalisty ds. danych spowoduje, że ludzie i firma stracą czas i/lub pieniądze. Umiejętność udzielenia szybkich, jasnych odpowiedzi bez uszczerbku dla dokładności jest kluczem do sukcesu w Twojej firmie.

Jak sobie poradzić z taką intensywnością zadań, presją czasową i odpowiedzialnością? Istnieją 3 umiejętności, które mają kluczowe znaczenie dla sukcesu zespołu ds. danych w Twojej firmie:

• Szybkość
• Dokładność
• Umiejętność Wyjaśniania

Posiadanie wszystkich trzech umiejętności jest nie tylko pomocne, ale wręcz kluczowe przy pracy na danych. Jeśli wszystkie trzy kompetencje nie są na najwyższym poziomie to ciężko będzie osiągnąć Tobie i Twojemu zespołowi skuteczność w obszarze pracy z danymi.

Oto dlaczego:

Wariant #1 Jeśli masz Dokładność i Umiejętność Wyjaśniania, ale nie masz Szybkości:
Twoi użytkownicy biznesowi będą sparaliżowani czekając na dostarczenie odpowiedzi. Nie będą zadowoleni z tego, że muszą czekać i jeśli nie dostarczysz im odpowiedzi nie zawahają się zrzucić winy za swój brak reakcji na zdarzenie biznesowe na Ciebie.

Wariant #2 Jeśli masz Szybkość i Umiejętność Wyjaśniania, ale nie masz Dokładności:
Szybki czas odpowiedzi na zapytania biznesowe będą cieszyć użytkowników… dopóki nie okaże się, że odpowiedzi, których udzieliłeś są błędne i nie odzwierciedlają rzeczywistości.

Wariant #3 Jeśli masz Dokładność i Szybkość, ale nie potrafisz Wyjaśnić:
Użytkownicy biznesowi mogą Ci ufać bezgranicznie i „w ciemno” przyjmować każdą odpowiedź. Wyższe kierownictwo może już mieć mniej zaufania do Twoich liczb. Najmniej będą go mieć audytorzy. Jeśli nie będziesz w stanie wytłumaczyć „skąd wzięła się ta konkretna liczba” jesteś w kropce.

Jako specjalista od danych nie chcesz się znaleźć w którejś z wyżej opisanych sytuacji. Tylko solidne trio (Szybkość + Dokładność + Umiejętność Wyjaśniania) wspiera Cię prawie w każdej sytuacji i pokazuje Twoją wiedzę i profesjonalizm wszystkim, którzy powinni je zobaczyć.

Jaki jest sekret do zdobycia tych 3 kluczowych umiejętności?

DOKŁADNOŚĆ

Data Lineage (Pochodzenie Danych) odnosi się do procesu zrozumienia i wizualizacji przepływu danych od źródła do bieżącej lokalizacji. Jest o śledzenie wszelkich zmian wprowadzonych w tych danych w trakcie ich transformacji aż do momentu użycia. To rodowód Twoich danych. W przeszłości zespoły danych musiały ręcznie śledzić pochodzenie danych, dziś zautomatyzowane narzędzia pozwalają śledzić dane szybciej i bardziej precyzyjnie. Różnica jest tak ogromna jak przy użyciu funkcji Word Count w Wordzie w porównaniu do ręcznego liczenia słów z dokumentu, który ma 1000 stron. Oprócz ogromnej ilości zaoszczędzonego czasu, możemy uniknąć ludzkiego błędu.

Dzięki Data Lineage dowiesz się także, skąd pochodzi konkretny fragment danych, kiedy i gdzie został wydzielony (wyeksportowany, wyekstrahowany), połączony z innymi danymi oraz jakie przekształcenia zostały zastosowane w trakcie, od momentu ich wprowadzenia aż do ich użycia.

Jaki jest efekt końcowy dla Ciebie jako profesjonalisty ds. danych? Wiarygodne dane, które Ty, Twój zespół i Twoi użytkownicy biznesowi mogą wykorzystywać i na nich polegać.

SZYBKOŚĆ

Jak wspomnieliśmy wcześniej, nikt nie będzie liczył ręcznie wszystkich słów w 1000 stronicowym dokumencie Word. Nie będzie to produktywne wykorzystanie czasu. Gdy użytkownicy biznesowi proszą o odpowiedź – chcą ją uzyskać jak najszybciej, a najlepiej od razu (przypomnijmy sobie wieżę kontroli lotów). Ręczna analiza tego, jak nasze dane się zmieniają, wydłuża czas na odpowiedź biznesową i angażuje ogromną ilość cennego czasu Twojego zespołu danych. Automatyzacja śledzenia skąd pochodzą dane uwalnia Twój zespół od czasochłonnego czytania wierszy kodu linijka po linijce.
Wszystko po to, aby zrozumieć:

• Co się stało, że dane mają określoną formę?
• I co się stanie jeśli dokonamy zmian w danych?

Jaki jest efekt końcowy dla Ciebie jako profesjonalisty ds. danych? Dzięki Data Lineage wszystko, co musisz zrobić, to określić dane, które chcesz prześledzić – i spojrzeć na kompleksową wizualizację przepływu danych przez Twoje systemy.

UMIEJĘTNOŚĆ WYJAŚNIANIA

Jako specjalista ds. danych znaczna część Twojego czasu obraca się wokół odpowiedzi na następujące pytania:

• Jak uzyskaliśmy tę konkretną liczbę?
• Jak doszło do błędu w raportowaniu?
• Jak zmiana wpłynie na nasze systemy, jeśli wprowadzimy zmiany?

Aby na nie odpowiedzieć, musisz śledzić każdy krok w ekstrakcji i transformacji danych. Im więcej systemów źródłowych tym trudniejsze i bardziej zagmatwane jest podążanie tym śladem. Automatyzacja śledzenia skąd pochodzą dane eliminuje zamieszanie i tworzy przejrzystą, wizualną i kompleksową mapę Twoich danych. Wystarczy, że wybierzesz dowolne dane, a Data Lineage pokaże z jakiego źródła te dane zostały pobrane i jakie transformacje zostały dokonane po drodze. Możesz również zobaczyć co dalej dzieje się z danymi aż do momentu, w którym korzystasz z nich np. w swoim systemie Business Intelligence.

Jaki jest efekt końcowy dla Ciebie jako profesjonalisty ds. danych? Zdolność do szybkiej i pewnej odpowiedzi na każde pytanie dotyczące Twoich danych skierowane do Ciebie przez użytkowników biznesowych, kierownictwo lub audytorów.

Podsumowując, dzięki zastosowaniu Data Lineage jako specjalista ds. danych będziesz mógł:

• Szybko odpowiadać na zapytania ze strony użytkowników biznesowych.
• Wykrywać, śledzić i korygować anomalie przetwarzania danych.
• Obniżyć koszty utrzymania aplikacji i przyspieszyć tworzenie nowych rozwiązań.
• Zwiększyć zaufanie do danych w całej organizacji.

Data Lineage, jak wspomnieliśmy na samym początku (porównując do liczenia znaków w Wordzie), można prześledzić ręcznie (wolno, narażając się na błąd czynnika ludzkiego), lub automatycznie (szybko, bez obawy o drobne lecz kluczowe błędy), korzystając na przykład z Qlik Sense w wersji SaaS dla Nprinting, Qlik Sense On-Premise i Qlik View.

Chcesz zobaczyć jak Data Lineage działa na żywo? Skontaktuj się z nami!

Pokażemy Ci na aplikacji demo siłę znajomości pochodzenia danych, a jeśli zajdzie taka potrzeba, rozwiążemy Twój problem na danych Twojej organizacji w 5 dni roboczych.