Przejdź do głównej treści

Hurtownia danych - magazyn informacji dla menadżera

Katgoria: BUSINESS INTELLIGENCE / Utworzono: 24 luty 2010

Hurtownia danych - magazyn informacji dla menadżera

Nie jest tajemnicą, że obecnie przewagę konkurencyjną zdobywa się poprzez szybkie reagowanie na zmiany zachodzące w sferze zewnętrznej (otoczenie gospodarcze) i wewnętrznej (obszar firmy) . Podstawą szybkiej i skutecznej reakcji jest posiadanie odpowiedniej informacji. O ile jednak zgadzamy się, że brak informacji jest niebezpieczny to często zapominamy, że jej nadmiar może mieć równie szkodliwy wpływ na prawidłowe funkcjonowanie firmy. Stąd tak istotne staje się efektywne zarządzanie danymi, które prowadzi do pozyskania informacji faktycznie potrzebnej, wiarygodnej oraz uczynienia jej łatwo dostępnej. Najpopularniejszym obecnie rozwiązaniem wspierającym takie zarządzanie jest hurtownia danych. W niniejszym artykule prezentowana jest pokrótce historia powstania tego narzędzia, zasady funkcjonowania, charakterystyka procesu wdrożeniowy oraz wyliczam korzyści i koszty związane z wykorzystaniem hurtowni danych w typowym przedsiębiorstwie.

Źródło pochodzenia

Hurtownia danych jest stosunkowo nowym narzędziem, choć koncepcja jest znana od lat. Polega ona na użyciu istniejących już w firmie informacji, aby ułatwić kierownictwu podejmowanie lepszych i szybszych decyzji. Na przestrzeni kilku ostatnich dziesięcioleci ten sam cel miał wiele różnych nazw. We wczesnych latach 80-tych bardzo popularne były aplikacje określane mianem EIS (z ang. Executive Information System – System wspomagania decyzji). Jednak często system EIS składał się z jednej osoby kopiującej kluczowe dane pochodzące z różnych, by później udostępnić je kierownictwu w najbardziej przejrzystej formie. Największą zmianą, jaka pojawiła się w ciągu ostatnich dziesięcioleci było pojawienie się potrzeby tworzenia raportów dla wszystkich rodzajów personelu kierowniczego. Potrzeby takie spełniają rozbudowane bazy danych zwane hurtowniami (z ang. Data Warehouse), wyposażone w zaawansowane interfejsy wymiany informacji z różnymi systemami zewnętrznymi: systemami transakcyjnymi, arkuszami kalkulacyjnymi a nawet plikami tekstowymi.

Zasada działania

Hurtownia danych jest wydzieloną wielowymiarową bazą danych integrującą pozostałe systemy informatyczne funkcjonujące w ramach przedsiębiorstwa. Integracja polega na cyklicznym zasilaniu hurtowni danymi z poszczególnych systemów transakcyjnych działających w firmie. Hurtownia danych w tej sytuacji może być zasilana informacjami (danymi) pochodzącymi z programów informatycznych (programu sprzedażowego, programu magazynowego, programu finansowo – księgowego, etc.) lub też bezpośrednio z plików arkuszy kalkulacyjnych czy nawet tekstowych. Dane mogą odświeżać się z dowolną częstotliwością, wszystko zależy więc od potrzeb informacyjnych użytkowników. Odświeżanie polega na „pobieraniu” przez hurtownię odpowiednich danych z programów transakcyjnych (lub plików) w określonych przedziałach czasowych. W praktyce najczęściej aktualizacja danych wykonywana jest w ciągu nocy, czyli raz na dobę.

Schemat_zasilania_moduu_Hurtownia_Danych

 

Prezentacja danych

Ważną rolę w wykorzystaniu danych zgromadzonych w hurtowni odgrywa analiza wielowymiarowa, która jest podstawa przetwarzania analitycznego (OLAP – On-line Analytical Processing). Dane gromadzone w hurtowni mają najczęściej charakter wielowymiarowy, co wynika z potrzeby dokonywania analiz wpływu wielu różnych czynników na zjawiska zachodzące w organizacji. Struktura wielowymiarowa przedstawia elementarne komórki danych (fakty), które są opisywane przez różne czynniki, zwane wymiarami. Popularne wymiary to: czas (dzień, miesiąc, kwartał, rok), centrum (firma, pion, dział), sprzedawca, asortyment, rodzaj kosztu, itd. Uprawniony użytkownik samodzielnie może definiować raporty. Dzięki zastosowaniu funkcjonalności tabeli przestawnej znanej z programu Excel możliwe jest dostosowanie układu raportu do specyficznych potrzeb każdego kierownika. Możliwość tworzenia i przeglądania takich raportów może odbywać w aplikacji instalowanej na danym komputerze, w aplikacji obsługiwanej poprzez przeglądarkę internetową (dostęp z każdego komputera zgodnie z nadanymi uprawnieniami) czy też w arkuszu kalkulacyjnym takim jak Excel (dwa ostatnie rozwiązania są najpopularniejsze). Należy dodać, że kształt raportów może być bardzo różny nie tylko ze względu na treść, co na interfejs graficzny. Mając dane obrobione oraz zgromadzone w jednym miejscu sposób ich prezentacji nie nastręcza już większych trudności i może przybrać wiele form, może to być ujęcie tabelaryczne (statyczne lub dynamiczne), może to byś zestaw wykresów (2D lub 3D), albo i jedno i drugie na raz. Rysunek 2. Fragment raportu kosztowego (przeglądarka internetowa)

Fragment_raportu_kosztowego__przegldarka_internetowa

Wdrożenie

Uogólniając, wdrożenie hurtowni danych przebiega wg następujących etapów:

  1. specyfikacji potrzeb informacyjnych użytkowników,
  2. opracowaniu architektury bazy danych hurtowni,
  3. określeniu interfejsów wymiany danych pomiędzy hurtownią i pozostałymi systemami transakcyjnymi funkcjonującymi w przedsiębiorstwie,
  4. określeniu wymagań sprzętowych i programowych do obsługi hurtowni,
  5. instalacji i parametryzacji modułu,
  6. szkolenia użytkowników systemu.

Czas wdrożenia hurtowni danych zależy od zbyt wielu czynników aby móc go podawać nawet w przybliżeniu. Główny wpływ na długość wdrożenia mają następujące czynniki natury technicznej: liczba i zróżnicowanie źródeł importu danych, wielkości oraz jakości importowanych danych, liczby obsługiwanych raportów, ilość użytkowników. Istotniejsze jednak pozostają czynniki natury organizacyjnej takie jak: skompletowanie odpowiedniego zespołu wdrożeniowego, zaangażowanie jego członków, wsparcie ze strony zarządu firmy, w której realizowany jest projekt, poziom natężenia prac, etc. Generalnie opracowanie hurtowni danych „od zera” w ciągu kwartału jest możliwe jeśli mamy na myśli proste struktury danych (kilkadziesiąt pól nie związanych skomplikowanymi algorytmami obliczeń), wymagające jedynie wizualizacji w postaci kilku predefiniowanych raportów. Większe wymagania oznaczają dodatkowe miesiące pracy. Należy zauważyć, że narzędzie takie jak hurtownia danych zacząć funkcjonować może relatywnie szybko jednak właściwy potencjał osiąga stopniowo poprzez kolejne przyrosty tematyczne danych (tzw. strategia drobnych kroków). Tak więc, hurtownia danych podlega ciągłej ewolucji, a ścieżka jej rozwoju zależy w głównej mierze od potrzeb informacyjnych przedsiębiorstwa. Co ciekawe, potrzeby te gwałtownie wzrastają wraz z realizacją procesu wdrożeniowego. Choć hurtownia danych prezentuje informacje, które już istnieją w ramach firmy (tyle, że nie są łatwo dostępne dla zainteresowanych i odpowiednio obrobione), to skutkiem ubocznym jej funkcjonowania w przedsiębiorstwie jest wywoływanie „głodu” menadżerów na zupełnie nowe informacje. Wynika to z faktu, że przeciętny menadżer poznaje zalety działania w oparciu o kompleksowe informacje na temat swojego centrum odpowiedzialności.

Jeśli chodzi o aspekt organizacyjny wdrożenia, praktyka potwierdza, że najskuteczniejszy model składa się z trzech zespołów:

  1. zespół konsultingowy, zapewniający metodologię budowy hurtowni, analizujący potrzeby biznesowe, wspomagający dobór sprzętu i oprogramowania,
  2. zespół softwarowy, dostarczający oprogramowanie bazodanowe, realizujący proces dostosowania i parametryzacji narzędzi informatycznych,
  3. zespół własny (firmy zlecającej wdrożenie), obejmujący ludzi zarówno ze sfery biznesu jak i informatyki, dbający o uzyskanie efektu zgodnego z założeniami.

Zdarza się jeszcze, że kierownictwo niektórych firm nie wierzy w wdrożenie hurtowni danych zakończonej sukcesem. Z naszych doświadczeń wynika, że to jest to raczej brak przekonania do nowoczesnej technologii lub unikanie odpowiedzialności za przeprowadzenie projektu. Tymczasem wystarczy porozmawiać z przedstawicielami przedsiębiorstw, w których hurtownia już jakiś czas działa. Najczęściej nie wyobrażają już sobie funkcjonowania bez niej.

Koszty i korzyści

Ostatecznie pozostaje więc pytanie, czy korzyści z wdrożenia hurtowni danych faktycznie przerastają koszty. Podjęcie decyzji komplikuje fakt, że projekt wdrożenia hurtowni danych to przedsięwzięcie niemałe, wymagające dużego zaangażowania, zabierające sporo czasu, mające charakter unikatowy oraz nie dające się szybko i precyzyjnie wycenić. Można jednak przyjąć, że bez względu na rozmiar i charakter przedsięwzięcia należy liczyć się z następującymi kosztami:

  • zakup serwera (zwykle kupuje się oddzielny komputer pod hurtownię danych, rzadziej korzysta się z komputera już używanego w firmie),
  • zakup komponentów softwarowych (serwer bazodanowy, nakładka aplikacyjna) – koszt zależy głównie od liczby planowanych użytkowników,
  • zaangażowanie firmy wdrażającej (mowa zarówno o konsultantach biznesowych jak i informatykach-wdrożeniowcach – koszt zależy głównie od liczby i formy przygotowywanych raportów),
  • zaangażowanie firmy, w której ma miejsce wdrożenie (prawidłowe wdrożenie hurtowni wymaga zaangażowania ze strony kluczowych pracowników),
  • opieka serwisowa (postawienie hurtowni to nie wszystko, brak odpowiedniej opieki dość szybko spowoduje spadek jakości prezentowanych danych ).

Generalnie wdrożenie hurtowni oznacza inwestycję na minimalnym poziomie ok. 30 tyś. zł, poziom maksymalny trudno określić (hurtownię w potężnych organizacjach jak np. banki mogą sięgać kilku milionów).

Przeciwstawiając kosztom korzyści powinno się przede wszystkim wymienić korzyści bezpośrednie:

  • integracja danych rozproszonych, niejednorodnych w jednym miejscu,
  • gwarancja łatwego dostępu do informacji (przez Internet lub sieć lokalną),
  • czytelny sposób prezentacji danych (możliwość samodzielnego budowania raportów lub korzystania z gotowych szablonów),
  • łatwe zarządzanie uprawnieniami w dostępie do określonych danych,
  • elastyczny charakter narzędzia – rozbudowa hurtowni możliwa jest w każdym momencie i na tym poziomie jest już relatywnie tania, • archiwizacja i zabezpieczenie przechowywanych danych,

oraz pośrednie:

  • wsparcie dla procesu decentralizacyjnego w przedsiębiorstwie,
  • podstawa implementacji innych rozwiązań usprawniających (np. budżetowanie, ocena centrów odpowiedzialności, badanie efektywności realizowanych procesów, itp.),
  • ogólna poprawa trafności podejmowanych decyzji na szczeblach kierowniczych.

Podsumowując, wdrożenie hurtowni danych ani nie jest procesem ani łatwym, ani tanim, jednak korzyści jakie ze sobą niesie są niezaprzeczalne. Najważniejsze okazuje się więc rozpoznanie własnych potrzeb w formie profesjonalnej diagnozy, która będzie stanowiła podstawę wyceny wdrożenia hurtowni danych, którą następnie można zestawić z możliwościami finansowymi firmy. Warto pamiętać, że obecnie przywilej posiadania hurtowni danych nie jest już zarezerwowany tylko dla dużych organizacji, technologia i wiedza konsultantów pozwala dostosować opisywane narzędzie z powodzeniem także do przedsiębiorstw średnich. Warto w tym miejscu przypomnieć słowa P.Drucker’a: „Aby móc czymś zarządzać, trzeba to coś mierzyć”. Hurtownia danych z pewnością ułatwi i jedno i drugie.

Źródło: www.archman.pl
Autor: Marek Kowalski


Najnowsze wiadomości

Kwantowy przełom w cyberochronie - nadchodząca dekada przepisze zasady szyfrowania na nowo
Przez długi czas cyfrowe bezpieczeństwo opierało się na prostym założeniu: współczesne komputery potrzebowałyby ogromnych zasobów i wielu lat, aby złamać silne algorytmy szyfrowania. Rozwój technologii kwantowej zaczyna jednak tę regułę podważać, a eksperci przewidują, że w perspektywie 5–10 lat może nadejść „dzień zero”. Jest to moment, w którym zaawansowana maszyna kwantowa będzie w stanie przełamać większość aktualnie stosowanych zabezpieczeń kryptograficznych w czasie liczonym nie w latach, lecz w godzinach.
PSI prezentuje nową identyfikację wizualną
psilogoW ramach realizowanej strategii transformacji PSI Software SE zaprezentowała nową identyfikację wizualną. Odświeżony wizerunek w spójny sposób oddaje technologiczne zaawansowanie firmy, jej głęboką wiedzę branżową oraz silne ukierunkowanie na potrzeby klientów. Zmiany te wzmacniają pozycję PSI jako innowacyjnego lidera technologicznego w obszarze skalowalnych rozwiązań informatycznych opartych na sztucznej inteligencji i chmurze, rozwijanych z myślą o energetyce i przemyśle.
PROMAG S.A. rozpoczyna wdrożenie systemu ERP IFS Cloud we współpracy z L-Systems
PROMAG S.A., lider w obszarze intralogistyki, rozpoczął wdrożenie systemu ERP IFS Cloud, który ma wesprzeć dalszy rozwój firmy oraz integrację kluczowych procesów biznesowych. Projekt realizowany jest we współpracy z firmą L-Systems i obejmuje m.in. obszary finansów, produkcji, logistyki, projektów oraz serwisu, odpowiadając na rosnącą skalę i złożoność realizowanych przedsięwzięć.
F5 rozszerza portfolio bezpieczeństwa o narzędzia do ochrony systemów AI w środowiskach enterprise
F5 ogłosiło wprowadzenie dwóch nowych rozwiązań - F5 AI Guardrails oraz F5 AI Red Team - które mają odpowiedzieć na jedno z kluczowych wyzwań współczesnych organizacji: bezpieczne wdrażanie i eksploatację systemów sztucznej inteligencji na dużą skalę. Nowa oferta łączy ochronę działania modeli AI w czasie rzeczywistym z ofensy
Snowflake + OpenAI: AI bliżej biznesu
Snowflake przyspiesza wykorzystanie danych i sztucznej inteligencji w firmach, przenosząc AI z fazy eksperymentów do codziennych procesów biznesowych. Nowe rozwiązania w ramach AI Data Cloud integrują modele AI bezpośrednio z danymi, narzędziami deweloperskimi i warstwą semantyczną. Partnerstwo z OpenAI, agent Cortex Code, Semantic View Autopilot oraz rozwój Snowflake Postgres pokazują, jak budować skalowalne, bezpieczne i mierzalne wdrożenia AI w skali całej organizacji.



Najnowsze artykuły

Magazyn bez błędów? Sprawdź, jak system WMS zmienia codzienność logistyki
SENTEWspółczesna logistyka wymaga nie tylko szybkości działania, lecz także maksymalnej precyzji – to właśnie te czynniki coraz częściej decydują o przewadze konkurencyjnej firm. Nawet drobne pomyłki w ewidencji stanów magazynowych, błędy przy przyjmowaniu dostaw czy nieprawidłowe rozmieszczenie towarów, mogą skutkować poważnymi stratami finansowymi i opóźnieniami w realizacji zamówień. W jaki sposób nowoczesne rozwiązania do zarządzania pomagają unikać takich sytuacji? Czym właściwie różni się tradycyjny system magazynowy od zaawansowanych rozwiązań klasy WMS (ang. Warehouse Management System)? I w jaki sposób inteligentne zarządzanie procesami magazynowymi realnie usprawnia codzienną pracę setek firm?
Migracja z SAP ECC na S4 HANA: Ryzyka, korzyści i alternatywne rozwiązania
W ostatnich latach wiele firm, które korzystają z systemu SAP ECC (Enterprise Central Component), stoi przed decyzją o przejściu na nowszą wersję — SAP S4 HANA. W obliczu końca wsparcia dla ECC w 2030 roku, temat ten staje się coraz bardziej aktualny. Przemiany technologiczne oraz rosnące oczekiwania związane z integracją nowych funkcji, jak sztuczna inteligencja (AI), skłaniają do refleksji nad tym, czy warto podjąć tak dużą zmianę w architekturze systemu. Przyjrzyjmy się głównym powodom, dla których firmy rozważają migrację do S4 HANA, ale także argumentom,  które mogą przemawiać za pozostaniem przy dotychczasowym systemie ECC, przynajmniej na krótki okres.
Jak maksymalizować zyski z MTO i MTS dzięki BPSC ERP?
BPSC FORTERROZysk przedsiębiorstwa produkcyjnego zależy nie tylko od wydajności maszyn, ale przede wszystkim od precyzyjnego planowania, realnych danych i umiejętnego zarządzania procesami. Dlatego firmy, które chcą skutecznie działać zarówno w modelu Make to Stock (MTS), jak i Make to Order (MTO), coraz częściej sięgają po rozwiązania klasy ERP, takie jak BPSC ERP.
Ponad połowa cyberataków zaczyna się od błędu człowieka
Ponad 2/3 firm w Polsce odnotowała w zeszłym roku co najmniej 1 incydent naruszenia bezpieczeństwa . Według danych Unit 42, zespołu analitycznego Palo Alto Networks, aż 60% ataków rozpoczyna się od działań wymierzonych w pracowników – najczęściej pod postacią phishingu i innych form inżynierii społecznej . To pokazuje, że w systemie ochrony organizacji pracownicy są kluczowym ogniwem – i że firmy muszą nie tylko edukować, ale też konsekwentnie egzekwować zasady cyberhigieny. Warto o tym pamiętać szczególnie teraz, w październiku, gdy obchodzimy Europejski Miesiąc Cyberbezpieczeństwa.
MES - holistyczne zarządzanie produkcją
Nowoczesna produkcja wymaga precyzji, szybkości i pełnej kontroli nad przebiegiem procesów. Rosnąca złożoność zleceń oraz presja kosztowa sprawiają, że ręczne raportowanie i intuicyjne zarządzanie coraz częściej okazują się niewystarczające. Firmy szukają rozwiązań, które umożliwiają im widzenie produkcji „na żywo”, a nie z opóźnieniem kilku godzin czy dni. W tym kontekście kluczową rolę odgrywają narzędzia, które porządkują informacje i pozwalają reagować natychmiast, zamiast po fakcie.

Przeczytaj Również

Real-Time Intelligence – od trendu do biznesowego must-have

Sposób prowadzenia działalności gospodarczej dynamicznie się zmienia. Firmy muszą stale dostosowywa… / Czytaj więcej

EPM – co to jest? Czy jest alternatywą dla BI?

Nowoczesne systemy BI i EPM dostarczają wiedzy potrzebnej do efektywnego zarządzania firmą. Czy zna… / Czytaj więcej

W jaki sposób firmy zwiększają swoją odporność na zmiany?

Do zwiększenia odporności na zmiany, konieczna jest pełna kontrola nad codziennymi procesami zapewn… / Czytaj więcej

Dlaczego systemy kontrolingowe są potrzebne współczesnym firmom?

Narzędzia Corporate Performance Management (CPM) pozwalają na przyśpieszenie tempa podejmowania dec… / Czytaj więcej

Hurtownie danych – funkcje i znaczenie dla BI

Przepisów na sukces biznesu jest na rynku wiele. Nie ulega jednak wątpliwości, że jednym z kluczowy… / Czytaj więcej

Po co dane w handlu? Okazuje się, że ich analityka może dać nawet 30 proc. większe zyski!

Jak wynika z badania firmy doradczej Capgemni, producenci FMCG oraz firmy związane z handlem detali… / Czytaj więcej