Dane w hurcie zanalizuję

Katgoria: IT SOLUTIONS / Utworzono: 18 maj 2011

Dane w hurcie zanalizuję

Hurtownia danych to centrum wiedzy o firmie. Zarezerwowane do niedawna wyłącznie dla dużych organizacji, obecnie coraz częściej wykorzystywane są również w średnich firmach. Czym są hurtownie danych, jak działają i czy rozwiązania klasy Business Intelligence In-memory mogą je zastąpić?

Im większa firma lub bardziej skomplikowany profil usług czy produkcji, tym bardziej potrzeba rozwiązań do przetwarzania danych. Duże organizacje nie mogą już istnieć bez hurtowni danych, które wpierają decyzje i pozwalają zorientować się w sytuacji w różnych obszarach działalności. Jednak coraz częściej hurtownie nie są efektywne. Jak wynika z raportu IDC „Oswajanie chaosu informacyjnego”, 75 proc. firm ma do czynienia ze zjawiskiem przeładowania informacyjnego, a tylko połowa informacji, którymi dysponują, jest naprawdę przydatnych przy podejmowaniu decyzji. W zarządzaniu danymi pojawiają się problemy, z których główne to ilość danych oraz ich rozproszenie.

Hurtownia wszystko ci powie

Hurtownia danych najczęściej pełni rolę centralnego repozytorium danych przedsiębiorstwa. Gromadzi dane z systemów i źródeł operacyjnych organizacji (takich jak CRM, ERP lub też bezpośrednio z arkuszy kalkulacyjnych czy tekstowych). Prekursorem polskich hurtowni danych był Narodowy Bank Polski, który przystąpił do budowy takiego systemu już w 1994 roku. Dziś nie ma już dużego przedsiębiorstwa, które mogłoby pozwolić sobie na działanie bez uporządkowania danych w hurtowniach.

Zadaniem hurtowni jest stworzenie szeregu raportów i zestawień, które dostarczają informacji potrzebnych do skutecznego podejmowania decyzji biznesowych. Rozwiązania te służą przede wszystkim do przeprowadzania analiz, wyszukiwania prawidłowości, zależności i wzorców lub do planowania różnego rodzaju działań ukierunkowanych na klientów. Bez hurtowni trudno odpowiedzieć na pytania, które na co dzień zadają managerowie: jaka była sprzedaż w zeszłym tygodniu, jaki był zysk w zeszłym miesiącu, jakie są stany magazynowe wybranego produktu, który segment klientów jest najlepszy, a który najgorszy, które produkty i usługi są najbardziej rentowne, czy właściwie ustalono cenę produktu… Tempo i jakość odpowiedzi na tego rodzaju pytania pozwalają firmie podejmować lepsze decyzje i w konsekwencji budować przewagę konkurencyjną.

Analizowanie danych gromadzonych w hurtowniach jest możliwe dzięki modelom przetwarzania informacji w czasie rzeczywistym OLAP (On-line Analytical Processing). OLAP umożliwia wykonanie wielu porównań i analiz ogromnej ilości danych w minimalnym czasie. W porównaniu do tradycyjnych metod przetwarzania danych np. w arkuszach kalkulacyjnych, oznacza to ogromną oszczędność czasu i pracy analityków. OLAP to technologia, która pozwala budować wielowymiarowe kostki danych na podstawie informacji znajdujących się w hurtowniach. Umożliwia tworzenie przekrojowych analiz, co pomaga natychmiast odpowiadać na pytania kadry managerskiej, ale też wspomaga planowanie i prognozowanie działalności przedsiębiorstwa. Dla przykładu - wielowymiarowa analiza danych pozwala np. szybko odpowiedzieć na pytanie, dlaczego firma uzyskała gorszy wynik sprzedażowy. Odpowiedź może kryć się np. w słabych wynikach jednego z oddziałów, nieefektywnej pracy konkretnych handlowców, schyłkowej fazie cyklu życia produktu lub źle ustalonej cenie. Innym przykładem mogą być firmy windykacyjne, które w oparciu o historię wierzytelności danego dłużnika oraz analogiczne przypadki z rejonu geograficznego czy rejonu działalności, poddają szybkiej analizie opłacalność przejęcia długu.

Dane gromadzone w hurtowni mają charakter wielowymiarowy – są uporządkowane według różnych wymiarów, takich jak czas (dzień, miesiąc, kwartał, rok), rodzaj kosztu, asortyment oraz odzwierciedlających strukturę organizacyjną firmy: pion, dział, handlowcy itd. Ponieważ hurtownie pobierają dane z wielu systemów, są w nich też zgromadzone informacje o danych (metadane), które określają ich pochodzenie i moment wprowadzenia (znaczniki czasu). Ułatwia to zarządzanie i wyszukiwanie informacji.

Jakość BI zależy od hurtowni

Hurtownia danych jest sercem większości systemów Business Intelligence (BI). Od jej poprawnego zaprojektowania zależy działanie aplikacji analitycznych. Według badań Gartnera, systemom BI firmy nadają dziś najwyższy priorytet. Podobne informacje prezentuje badanie IBM Global CIO Study przeprowadzone wśród dyrektorów IT z całego świata. Wykazało ono, że 83 proc. dyrektorów średnich firm uznaje rozwiązania BI za element kluczowy dla zwiększenia konkurencyjności. Według CIMA (Chartered Institute of Management Accountants), instytucji kształcącej kadrę menedżerską w zarządzaniu finansami, rozwiązania BI to dziś najważniejsze rozwiązania wspomagające efektywne analizy, raportowanie i podejmowanie decyzji menadżerskich. Stanowią doskonałe wsparcie w eliminacji ryzyka, przez co zmniejszają możliwości występowania strat w firmie. BI ogranicza ryzyko błędnych decyzji i jednocześnie generuje niebagatelne korzyści biznesowe. Analitycy firmy Comarch przytaczają przykłady polskich firm, w których dzięki wdrożeniu BI udało się osiągnąć 20 proc. wzrost sprzedaży lub zaoszczędzić od 10 do 30 proc. czasu operacyjnego pracowników.

OLAP a BI in-memory – wojna czy pokojowa koegzystencja?

Obok tradycyjnych systemów BI istnieją systemy bazujące na ładowaniu danych do pamięci operacyjnej i ich natychmiastowym analizowaniu, tzw. BI in-memory. Analitycy i praktycy porównują przydatność obu typów rozwiązań. BI in-memory nie potrzebuje hurtowni danych, wdraża się więc takie systemy szybko. Są one bardzo wydajne, analizują w sekundy nieprawdopodobne ilości rekordów. Ale czy rzeczywiście zdominują rynek? W niektórych przypadkach, w razie konieczności natychmiastowej analizy danych ad hoc tradycyjna architektura BI oparta o hurtownie i sztywne struktury OLAP faktycznie staje się niewydolna. OLAP zwykle ogranicza analizy do kilkunastu wymiarów. W BI in-memory analizy nie są ograniczone żadną liczbą wymiarów, natomiast technologia ta zawsze wymaga indywidualnego definiowania dostępu do danych z różnych systemów. Dlatego trudniej jest panować nad standaryzacją przetwarzanych danych. OLAP i hurtownie danych dokładnie definiują sposób zasilania hurtowni danymi i narzucają standaryzację – np. dane godzinowe, dzienne, tygodniowe. Zapewnia to powtarzalność wyników. Jak prognozują analitycy rynku oba rozwiązania będą istnieć równolegle, ale podzielą się zadaniami: BI in-memory będzie wspierać działania operacyjne, zaś tradycyjne BI oparte na OLAP odpowiadać będą za wsparcie działań strategicznych. Gartner przewiduje, że do 2012 r. większość firm z listy Fortune 1000 będzie używać BI in-memory. Nie należy się jednak spodziewać ich natychmiastowego upowszechnienia z powodu wciąż wysokich kosztów. Takie rozwiązania wymagają bardzo wydajnych komputerów i sporych zasobów pamięci, a duże kości pamięci DRAM wciąć są drogie. W 2012 roku 1 gigabajt DRAM ma kosztować mniej niż 10 USD i być może dzięki temu liczba wdrożeń wzrośnie.

Autor: Mariusz Wieteska - Ekspert Business Intelligence w Pentacomp Systemy Informatyczne
Źródło: www.pentacomp.pl

Najnowsze wiadomości

Kwantowy przełom w cyberochronie - nadchodząca dekada przepisze zasady szyfrowania na nowo

Przez długi czas cyfrowe bezpieczeństwo opierało się na prostym założeniu: współczesne komputery potrzebowałyby ogromnych zasobów i wielu lat, aby złamać silne algorytmy szyfrowania. Rozwój technologii kwantowej zaczyna jednak tę regułę podważać, a eksperci przewidują, że w perspektywie 5–10 lat może nadejść „dzień zero”. Jest to moment, w którym zaawansowana maszyna kwantowa będzie w stanie przełamać większość aktualnie stosowanych zabezpieczeń kryptograficznych w czasie liczonym nie w latach, lecz w godzinach.

Czytaj całość

PSI prezentuje nową identyfikację wizualną

W ramach realizowanej strategii transformacji PSI Software SE zaprezentowała nową identyfikację wizualną. Odświeżony wizerunek w spójny sposób oddaje technologiczne zaawansowanie firmy, jej głęboką wiedzę branżową oraz silne ukierunkowanie na potrzeby klientów. Zmiany te wzmacniają pozycję PSI jako innowacyjnego lidera technologicznego w obszarze skalowalnych rozwiązań informatycznych opartych na sztucznej inteligencji i chmurze, rozwijanych z myślą o energetyce i przemyśle.

Czytaj całość

PROMAG S.A. rozpoczyna wdrożenie systemu ERP IFS Cloud we współpracy z L-Systems

PROMAG S.A., lider w obszarze intralogistyki, rozpoczął wdrożenie systemu ERP IFS Cloud, który ma wesprzeć dalszy rozwój firmy oraz integrację kluczowych procesów biznesowych. Projekt realizowany jest we współpracy z firmą L-Systems i obejmuje m.in. obszary finansów, produkcji, logistyki, projektów oraz serwisu, odpowiadając na rosnącą skalę i złożoność realizowanych przedsięwzięć.

Czytaj całość

F5 rozszerza portfolio bezpieczeństwa o narzędzia do ochrony systemów AI w środowiskach enterprise

F5 ogłosiło wprowadzenie dwóch nowych rozwiązań - F5 AI Guardrails oraz F5 AI Red Team - które mają odpowiedzieć na jedno z kluczowych wyzwań współczesnych organizacji: bezpieczne wdrażanie i eksploatację systemów sztucznej inteligencji na dużą skalę. Nowa oferta łączy ochronę działania modeli AI w czasie rzeczywistym z ofensy

Czytaj całość

Snowflake + OpenAI: AI bliżej biznesu

Snowflake przyspiesza wykorzystanie danych i sztucznej inteligencji w firmach, przenosząc AI z fazy eksperymentów do codziennych procesów biznesowych. Nowe rozwiązania w ramach AI Data Cloud integrują modele AI bezpośrednio z danymi, narzędziami deweloperskimi i warstwą semantyczną. Partnerstwo z OpenAI, agent Cortex Code, Semantic View Autopilot oraz rozwój Snowflake Postgres pokazują, jak budować skalowalne, bezpieczne i mierzalne wdrożenia AI w skali całej organizacji.

Czytaj całość

RAPORT ERP

Katalog rozwiązań IT

Katalog firm

Najnowsze artykuły

Magazyn bez błędów? Sprawdź, jak system WMS zmienia codzienność logistyki

Współczesna logistyka wymaga nie tylko szybkości działania, lecz także maksymalnej precyzji – to właśnie te czynniki coraz częściej decydują o przewadze konkurencyjnej firm. Nawet drobne pomyłki w ewidencji stanów magazynowych, błędy przy przyjmowaniu dostaw czy nieprawidłowe rozmieszczenie towarów, mogą skutkować poważnymi stratami finansowymi i opóźnieniami w realizacji zamówień. W jaki sposób nowoczesne rozwiązania do zarządzania pomagają unikać takich sytuacji? Czym właściwie różni się tradycyjny system magazynowy od zaawansowanych rozwiązań klasy WMS (ang. Warehouse Management System)? I w jaki sposób inteligentne zarządzanie procesami magazynowymi realnie usprawnia codzienną pracę setek firm?

Czytaj całość

Migracja z SAP ECC na S4 HANA: Ryzyka, korzyści i alternatywne rozwiązania

W ostatnich latach wiele firm, które korzystają z systemu SAP ECC (Enterprise Central Component), stoi przed decyzją o przejściu na nowszą wersję — SAP S4 HANA. W obliczu końca wsparcia dla ECC w 2030 roku, temat ten staje się coraz bardziej aktualny. Przemiany technologiczne oraz rosnące oczekiwania związane z integracją nowych funkcji, jak sztuczna inteligencja (AI), skłaniają do refleksji nad tym, czy warto podjąć tak dużą zmianę w architekturze systemu. Przyjrzyjmy się głównym powodom, dla których firmy rozważają migrację do S4 HANA, ale także argumentom, które mogą przemawiać za pozostaniem przy dotychczasowym systemie ECC, przynajmniej na krótki okres.

Czytaj całość

Jak maksymalizować zyski z MTO i MTS dzięki BPSC ERP?

Zysk przedsiębiorstwa produkcyjnego zależy nie tylko od wydajności maszyn, ale przede wszystkim od precyzyjnego planowania, realnych danych i umiejętnego zarządzania procesami. Dlatego firmy, które chcą skutecznie działać zarówno w modelu Make to Stock (MTS), jak i Make to Order (MTO), coraz częściej sięgają po rozwiązania klasy ERP, takie jak BPSC ERP.

Czytaj całość

Ponad połowa cyberataków zaczyna się od błędu człowieka

Ponad 2/3 firm w Polsce odnotowała w zeszłym roku co najmniej 1 incydent naruszenia bezpieczeństwa . Według danych Unit 42, zespołu analitycznego Palo Alto Networks, aż 60% ataków rozpoczyna się od działań wymierzonych w pracowników – najczęściej pod postacią phishingu i innych form inżynierii społecznej . To pokazuje, że w systemie ochrony organizacji pracownicy są kluczowym ogniwem – i że firmy muszą nie tylko edukować, ale też konsekwentnie egzekwować zasady cyberhigieny. Warto o tym pamiętać szczególnie teraz, w październiku, gdy obchodzimy Europejski Miesiąc Cyberbezpieczeństwa.

Czytaj całość

MES - holistyczne zarządzanie produkcją

Nowoczesna produkcja wymaga precyzji, szybkości i pełnej kontroli nad przebiegiem procesów. Rosnąca złożoność zleceń oraz presja kosztowa sprawiają, że ręczne raportowanie i intuicyjne zarządzanie coraz częściej okazują się niewystarczające. Firmy szukają rozwiązań, które umożliwiają im widzenie produkcji „na żywo”, a nie z opóźnieniem kilku godzin czy dni. W tym kontekście kluczową rolę odgrywają narzędzia, które porządkują informacje i pozwalają reagować natychmiast, zamiast po fakcie.

Czytaj całość