Systemy Business Intelligence Oferta Microsoft Jarosław Szymaniuk Microsoft Warszawa, 26 marca 2017

Business Intelligence (BI) BI – klucz do uwolnienia wiedzy Dostęp Łatwy dostęp do różnych źródeł danych Analiza Narzędzia do eksploracji danych Dystrybucja Aktywny i bierny dostęp do informacji W ramach organizacji i poza nią Pracownicy, dostawcy, klienci, partnerzy, ...

Miejsce BI wśród systemów informatycznych wspierających zarządzanie

Terminologia ETL (extraction, transformation, loading) Ekstrakcja danych Transformacja danych Ładowanie danych Hurtownia danych Wydzielona baza danych Zawiera dane historyczne i bieżące Data Mart - Składnica danych Ściśle związana z mniejszą grupą użytkowników Tematycznie dostosowana, zoptymalizowana dla ich potrzeb OLAP (On-Line Analytical Processing) Przetwarzanie danych wielowymiarowych Krótki czas odpowiedzi na dowolne zapytanie

OLAP – Analizy wspierające proces podejmowania decyzji biznesowych Oddział Poznań Kraków Gdańsk Produkt ROR Rach. Inwest. Depozyt Kredyt Inne 69,059,440 PLN 8,755 szt. 7,888 PLN Q4 Czas Q1 Q2 Q3

Business Intelligence - architektura Informacja  Wiedza Informacja Informacja  Wiedza  Wnioski  Działanie Informacja  Wiedza  Wnioski Informacja  Wiedza  Wnioski  Działanie  Wyniki Użytkownicy: Raporty Zapytania do bazy Analizy OLAP EIS Budżetowanie Data Mining Systemy źródłowe Kostka OLAP DM ETL Hurtownia danych DM

Trochę historii: BI w Microsoft 1996/1997 SQL Server 7.0 1998 SQL Server 2000 2000 Stworzenie zespołu ekspertów BI: Jim Gray Peter Spiro Bill Baker Zakup Panorama Zdefiniowanie OLE DB for OLAP Data Warehousing Alliance Wejście na rynek BI OLAP Services Data Transformation Services Microsoft Repository English Query Data Mining Skalowalność OLAP (T3) Excel 2000 & XP Microsoft Data Analyzer SharePoint Portal Server XML for Analysis

Data Warehousing Alliance Members Appsco Software Limited Arcplan Inc Ardent Software Inc Artech Baan Company Best Software Broadbase Software Inc Business Objects ChangePoint Citicorp ITI Limited Cizer Software Corporation Cognos Comshare Data Mirror Data Watch Decisionism Decision Support Panel EMS Plc Epicor FRx Software Corp Harmony Infinium Software Informatica Information Builders Knosys/ProClarity Lawson Manugistics Maximal Innovative Intelligence MetaEdge MIS Technologies Gmbh NetAcumen OLAP @ Work Inc Polyvista Software Portola Dimensional Revelwood Inc Sagent Technology Seagate Software Silvon Software SRC Software Inc Targit A/S Top Tier Visual Insights Data Warehousing Alliance Members

Microsoft - kompleksowa oferta SYSTEMY ŹRÓDŁOWE EXTRACTION TRANSFORM LOAD MANAGE DOSTĘP UŻYTKOWNIKÓW I ANALIZY DATA WAREHOUSE DATA MARTS Data Warehouse / Data Mart i Operational Data Store PREZENTACJA / OLAP Ad-hoc Query Tools Raporty Aplikacje na zamówienie Aplikacje analityczne Web Services i Aplikacje mobilne OLAP : - HOLAP - ROLAP - MOLAP Data Mining Modele OLE DB XML/A

Microsoft - kompleksowa oferta EXTRACTION TRANSFORM LOAD MANAGE SYSTEMY ŹRÓDŁOWE DATA WAREHOUSE DATA MARTS PREZENTACJA / OLAP DOSTĘP UŻYTKOWNIKÓW I ANALIZY OLAP including HOLAP, ROLAP, MOLAP query services; may store atomic data; may be frequently refreshed Data Mining Models forecasting; clustering; scoring OLE DB XML/A DTS OLEDB Excel / MSDA / Sharepoint / IE Third Party (DWA Q&R) Visual Studio Data Warehousing Alliance DTS DTS / HIS Ad-hoc Query Tools Reporting Custom Apps Analytical Apps Web Services and Mobile Apps SQL Server Oracle IBM OLAP including HOLAP, ROLAP, MOLAP query services; may store atomic data; may be frequently refreshed Data Mining Models forecasting; clustering; scoring SQL Server Analysis Services (OLAP) (Data Mining) SQL Server Data Warehouse or Data Mart (dimensional, subject oriented) and Operational Data Store

Budowa systemu BI Etapy procesu Data Marts Systemy źródłowe Analysis Services SQL SQL SQL SQL Server Data Warehouse Klienci DB2 Narzędzia Query Raportowanie Analizy Data Mining Analysis Services Oracle 1 2 3 Stworzenie struktury bazy Stworzenie Dostęp i zasilanie hurtowni danych kostek OLAP do danych

Narzędzia ETL – Microsoft Data Transformation Services (DTS) Zestaw narzędzi umożliwiający łatwe oprogramowanie przesyłania i transformacji danych ‘pompa danych’ Baza docelowa Transform Źródła danych TSQL VBScript JScript VBA .EXE .BAT

Udziały w rynku baz danych Microsoft #1 i #2 Windows Oracle 37% IBM 19% Informix 1% Sybase 2% Other 3% Microsoft 38% $2.4B Total 40% Growth Unix+Windows Oracle 53% IBM 16% Informix 4% Sybase Other 6% Microsoft 17% $5.4B Total 24% Growth Dane za rok 2000 Źródło: GartnerDataquest

Benchmark TPC-C cena / wydajność wydajność 709220 14.96 $ SymfoWARE / SUN Solaris SQL Server / Win2k Adv SQL Server / Win2k Adv SQL Srv 2k / Win2k Adv SQL Srv 2k / Win2k Adv Oracle 9i / Compaq Tru64 SymfoWARE / Sun Solaris SQL Server / Win2k DC IBM DB2 / Win2k Adv Oracle 9i / HP UX 2002-02-19, źródło: www.tpc.org

Budowa systemu BI Etapy procesu Data Marts Systemy źródłowe Analysis Services SQL SQL SQL SQL Server Data Warehouse Klienci DB2 Narzędzia Query Raportowanie Analizy Data Mining Analysis Services Oracle 1 2 3 Stworzenie struktury bazy Stworzenie Dostęp i zasilanie hurtowni danych kostek OLAP do danych

MS Analysis Services Integracja z dowolnym źródłem danych (OLEDB) Skalowalność - wsparcie wszystkich sposobów przechowywania danych (MOLAP, ROLAP, HOLAP)

Analysis Services - Wymiary Wspólne/prywatne Regularne/nieregularne Hierarchia drzewiasta (relacja rodzic – potomek) Dane w węzłach O dużej liczbie elementów (grupowanie) Wymiary o liczbie potomków większej niż 64k Atrybuty Wiele hierarchii Własne formuły podsumowujące

SQL Server 2000 Analysis Services Zabezpieczenia, zarządzanie Uprawnienia Dla bazy OLAP / poszczególnych kostek Dla poszczególnych wymiarów ( hierarchii ) Zakres poziomów, zakres elementów, wyrażenia Opcjonalne uprawnienia w zbiorze danych Do poziomu poszczególnych komórek dla zapisu i/lub odczytu Zarządzanie Narzędzie graficzne Programowo - Decision Support Objects

Analysis Services - Kostki Kostki wirtualne Distributed Partitions Cubes Partycje Jednostka przetwarzania Storage (MOLAP, ROLAP, HOLAP) Optymalizacje Lokalne/zdalne Rozproszone Miary wyliczane Drillthrough Odczyt danych źródłowych Writeback Lazy aggregations

Analysis Services - Aggregation Wizard AW znajduje regułę “80-20” dla danych 20% wszystkich możliwych agregacji, które zapewniają 80% zysku wydajności Wyszukuje agregacje najczęściej wykorzystywane przez inne agregacje Niezależny od modelu danych OLAP Optymalizacja dla partycji