Eksploracja danych i magazynowanie danych
Data Mining vs Data Warehousing
Pojęcia "data mining" i "data storagehousing" odnoszą się do dziedziny zarządzania danymi. Są to programy do gromadzenia danych, które są wykorzystywane głównie do badania i analizy statystyk, wzorców i wymiarów w ogromnej ilości danych.
Eksploracja danych
Termin "eksploracja danych" jest używany w procesie, który obejmuje analizę danych pod kątem różnych perspektyw i zsumowanie tych danych w użyteczne informacje. Oprogramowanie do eksploracji danych przetwarza informacje w celu regulacji danych w celu obniżenia kosztów lub zwiększenia przychodów lub obu.
Procedury eksploracji danych obejmują dogłębne badanie i gromadzenie informacji poprzez identyfikację określonych trendów w oparciu o dane i zapytania generowane przez użytkownika. Głównym celem oprogramowania do eksploracji danych jest identyfikacja nietypowych wzorców, w szczególności oszustw związanych z finansami, i generowanie sterowanych programów w celu zwiększenia marketingu.
Oprogramowanie do eksploracji danych jest używane głównie ze względu na ogromną ilość zebranych danych. Dane przesyłane są przez skanery, bezpośrednią odpowiedź pocztową, bankomaty, dzienniki serwera sieci Web, dane demograficzne, kamery z obwodami zamkniętymi, transakcje kartami kredytowymi i wiele dodatkowych źródeł. Wszystkie te informacje muszą zostać zatwierdzone i podsumowane przed przeprowadzeniem jakiejkolwiek analizy. Ten proces jest klasyfikowany jako hurtownie danych. Następnym krokiem jest uporządkowanie tych informacji za pomocą różnych procedur zintegrowanych w ramach eksploracji danych.
Oprogramowanie do eksploracji danych wykorzystuje różne kroki. Pierwszym krokiem jest wstępne przetwarzanie danych, które obejmuje: wybór danych, czyszczenie danych, usuwanie hałasu i przekształcanie danych. Po utworzeniu tych wspólnych jednostek informacji generowane są nowe pola. Następnym krokiem jest budowa modelu eksploracji danych. Tutaj generowany jest prospektywny model podsumowujący przydatne informacje. Ostatnim krokiem jest ocena modelu eksploracji danych.
Wydobywanie danych jest obecnie konieczne głównie ze względu na rosnącą konkurencję w biznesie. Firmy konkurują pod względem usług, personalizacji, bezpieczeństwa i pracy w czasie rzeczywistym.
Magazyn danych
Hurtownia danych to proces gromadzenia i przechowywania danych, które mogą być następnie analizowane pod kątem eksploracji danych. Hurtownia danych to rozbudowany system komputerowy o dużej pojemności. Dane ze wszystkich źródeł są kierowane do tego źródła, w którym dane są czyszczone w celu usunięcia sprzecznych i nadmiarowych informacji. Proces magazynowania danych umożliwia scentralizowany dostęp do danych.
Opracowane i zawiłe techniki przechwytywania i przetwarzania danych są głównymi źródłami dla organizacji w celu ustanowienia efektywnego i wydajnego magazynu danych. Są one istotnym atutem dla firm, aby utrzymać rentowność, wydajność i przewagę konkurencyjną. Zebrane dane przechodzą przez proces o nazwie Zarządzanie cyklem życia danych.
Magazyn danych wykorzystuje techniki dla względnych systemów zarządzania bazami danych, takich jak ekstrakcja, ładowanie, przekształcanie i relacyjne przetwarzanie aplikacji online. Istnieją cztery cechy techniki magazynowania danych. Są to: projektowanie obiektowe, integracja z danymi, nieulotny obraz stanów, dane i warianty danych w czasie.
Streszczenie:
- Techniki data mining i data warehousing są częścią systemu zarządzania danymi.
- Magazyn danych zajmuje się głównie gromadzeniem danych, a wyszukiwanie danych zajmuje się analizowaniem i podsumowaniem ważnych informacji dla organizacji.
- Techniki eksploracji danych i procesów magazynowania danych są różne.
