Systemy przedsiębiorstwa mogą mieć wiele źródeł danych głównych — wspólne dane współużytkowane przez systemy. Ten fakt może stać się widoczny, gdy katalogujesz źródła danych. Przykłady danych głównych obejmują dane klienta, produktu, lokalizacji, zasobu i dostawcy. Gdy używasz profisee do scalania, weryfikowania i poprawiania danych głównych, możesz zapewnić skuteczność tych danych. W szczególności można jej użyć do utworzenia wspólnej zaufanej platformy do analizy i poprawy operacyjnej. Korzystając z definicji ładu, szczegółowych informacji i wiedzy, które zostały szczegółowo opisane w usłudze Microsoft Purview, możesz efektywnie tworzyć platformę.
Ta architektura referencyjna przedstawia rozwiązanie do zarządzania ładem i danymi, które oferuje platformę Microsoft Purview i profisee master data management (MDM). Te usługi współpracują ze sobą, aby zapewnić podstawę wysokiej jakości, zaufanych danych, które maksymalizuje wartość biznesową danych na platformie Azure. Krótkie wideo na temat tego rozwiązania można znaleźć w temacie Możliwości w pełni zintegrowanego zarządzania danymi głównymi na platformie Azure.
Architektura
Na poniższym diagramie przedstawiono kroki, które należy wykonać podczas tworzenia i obsługi rozwiązania danych głównych. Te kroki należy traktować jako wysoce iteracyjne. W miarę rozwoju rozwiązania możesz powtarzać te kroki i fazy, czasami automatycznie i czasami ręcznie. Niezależnie od tego, czy używasz kroków automatycznych, czy ręcznych, zależy od zmian, które są poddawane rozwiązaniu danych głównych, metadanych i danych.
Pobierz plik programu Visio z tą architekturą.
Przepływ danych
Przepływ metadanych i danych obejmuje następujące kroki, które są wyświetlane na powyższym rysunku:
Wstępnie utworzone łączniki usługi Microsoft Purview są używane do tworzenia wykazu danych ze źródłowych aplikacji biznesowych. Łączniki skanują źródła danych i wypełniają Wykaz danych w Microsoft Purview.
Model danych głównych jest publikowany w usłudze Microsoft Purview. Główne jednostki danych utworzone w profisee MDM są bezproblemowo publikowane w usłudze Microsoft Purview. Ten krok dodatkowo wypełnia Wykaz danych w Microsoft Purview i zapewnia, że istnieje rekord tego krytycznego źródła danych w usłudze Microsoft Purview.
Standardy ładu i zasady dotyczące zarządzania danymi są używane do wzbogacania definicji jednostek danych głównych. Dane są wzbogacone w usłudze Microsoft Purview za pomocą słownika danych i słownika, danych własności i klasyfikacji poufnych danych. Wszelkie definicje i metadane, które są dostępne w usłudze Microsoft Purview, są widoczne w czasie rzeczywistym w profisee jako wskazówki dla stewardów danych MDM.
Dane główne z systemów źródłowych są ładowane do profisee MDM. Zestaw narzędzi integracji danych, taki jak Usługa Azure Data Factory, wyodrębnia dane z systemów źródłowych przy użyciu dowolnego z ponad 100 wstępnie utworzonych łączników lub bramy REST. Wiele strumieni danych głównych jest ładowanych do profisee MDM.
Dane główne są ustandaryzowane, dopasowane, scalone, wzbogacone i zweryfikowane zgodnie z regułami ładu. Inne systemy, takie jak Microsoft Purview, mogą definiować jakość danych i reguły ładu. Jednak profisee MDM to system, który wymusza te reguły. Rekordy źródłowe są dopasowywane i scalane w systemach źródłowych i w celu utworzenia najbardziej kompletnego i poprawnego możliwego rekordu. Reguły jakości danych sprawdzają każdy rekord pod kątem zgodności z wymaganiami biznesowymi i technicznymi. Każdy rekord, który kończy się niepowodzeniem weryfikacji lub zwraca niski wynik prawdopodobieństwa, podlega korygowaniu. Aby skorygować nieudane weryfikacje, proces przepływu pracy przypisuje rekordy, które wymagają przeglądu do stewardów danych, którzy są ekspertami w swojej domenie danych biznesowych. Po zweryfikowaniu lub skorygowaniu rekordu można go użyć jako złotego wzorca rekordów.
Dane transakcyjne są ładowane do rozwiązania do analizy podrzędnej. Zestaw narzędzi integracji danych, taki jak Data Factory, wyodrębnia transakcyjne dane z systemów źródłowych przy użyciu dowolnego z ponad 100 wstępnie utworzonych łączników lub bramy REST. Zestaw narzędzi ładuje dane bezpośrednio do platformy danych analitycznych, takiej jak Azure Synapse Analytics. Analiza tych nieprzetworzonych informacji bez odpowiednich danych master golden data podlega niedokładności, ponieważ dane nakładają się, niezgodność i konflikty nie są jeszcze rozwiązane.
Łączniki usługi Power BI zapewniają bezpośredni dostęp do wyselekcjonowanych danych głównych. Użytkownicy usługi Power BI mogą używać danych głównych bezpośrednio w raportach. Dedykowany łącznik usługi Power BI rozpoznaje i wymusza zabezpieczenia oparte na rolach. Ukrywa również różne pola systemowe, aby uprościć ich użycie.
Wysokiej jakości wyselekcjonowane dane główne są publikowane w rozwiązaniu do analizy podrzędnej. Jeśli rekordy danych głównych zostały scalone z pojedynczym złotym rekordem, zostaną zachowane łącza nadrzędno-podrzędne do oryginalnych rekordów.
Platforma analityczna ma zestaw danych certyfikowanych w taki sposób, że jest kompletny, spójny i dokładny. Te dane zawierają prawidłowo wyselekcjonowane dane główne i skojarzone dane transakcyjne. Ta kombinacja stanowi solidną podstawę zaufanych danych, które są dostępne do dalszej analizy.
Wysokiej jakości dane główne są wizualizowane i analizowane, a stosowane są modele uczenia maszynowego. System zapewnia szczegółowe informacje na temat prowadzenia działalności firmy.
Elementy
Microsoft Purview to rozwiązanie do zapewniania ładu danych, które zapewnia szeroki wgląd w lokalne i chmurowe zasoby danych. Usługa Microsoft Purview oferuje kombinację odnajdywania i klasyfikacji danych, pochodzenia, wyszukiwania metadanych i odnajdywania oraz szczegółowych informacji o użyciu. Wszystkie te funkcje ułatwiają zarządzanie danymi i ich zrozumienie w całym krajobrazie danych przedsiębiorstwa.
Profisee MDM to szybka i intuicyjna platforma MDM , która bezproblemowo integruje się z technologiami firmy Microsoft i ekosystemem zarządzania danymi platformy Azure.
Data Factory to hybrydowa usługa integracji danych. Za pomocą usługi Data Factory można tworzyć, planować i organizować przepływy pracy wyodrębniania, przekształcania i ładowania (ETL) oraz wyodrębniania, ładowania i przekształcania (ELT). Usługa Data Factory oferuje również ponad 100 wstępnie utworzonych łączników i bramę REST, której można użyć do wyodrębniania danych z systemów źródłowych.
Usługa Azure Synapse Analytics to szybki, elastyczny i zaufany magazyn danych w chmurze, który korzysta z ogromnej architektury przetwarzania równoległego. Za pomocą usługi Azure Synapse Analytics można skalować, obliczać i przechowywać dane elastycznie i niezależnie.
Usługa Power BI to zestaw narzędzi do analizy biznesowej, który dostarcza szczegółowe informacje w całej organizacji. Usługa Power BI umożliwia łączenie się z setkami źródeł danych, upraszczanie przygotowywania danych i improwizowanych analiz. Możesz również tworzyć piękne raporty, a następnie publikować je dla organizacji w celu korzystania z internetu i na urządzeniach przenośnych.
Alternatywy
Jeśli nie masz dedykowanej aplikacji MDM, możesz znaleźć niektóre możliwości techniczne potrzebne do utworzenia rozwiązania MDM na platformie Azure:
- Jakość danych. Podczas ładowania danych do platformy analitycznej można tworzyć jakość danych w procesach integracji. Na przykład można użyć skryptów zakodowanych w kodzie w celu zastosowania przekształceń jakości danych w potoku usługi Data Factory .
- Standaryzacja i wzbogacanie danych. Usługa Azure Mapy może zapewnić weryfikację danych i standaryzację danych adresowych. Dane ustandaryzowane można używać w usługach Azure Functions i Data Factory. Aby standandaryzować inne dane, może być konieczne opracowanie zakodowanych skryptów.
- Zduplikowane zarządzanie danymi. Za pomocą usługi Data Factory można deduplikować wiersze , jeśli są dostępne wystarczające identyfikatory dla dokładnego dopasowania. Prawdopodobnie potrzebujesz niestandardowych skryptów zakodowanych w kodzie, aby zaimplementować logikę potrzebną do scalania dopasowanych wierszy podczas stosowania odpowiednich technik ocalałych danych.
- Zarządzanie danymi. Usługa Power Apps umożliwia szybkie opracowywanie podstawowych rozwiązań do zarządzania danymi na platformie Azure. Można również opracowywać odpowiednie interfejsy użytkownika na potrzeby przeglądów, przepływów pracy, alertów i walidacji.
W środowiskach skoncentrowanych na firmie Microsoft usługa Azure Synapse Analytics jest ogólnie preferowana jako usługa analityczna. Można jednak użyć dowolnej bazy danych analizy. Snowflake i Databricks są typowymi wyborami.
Szczegóły scenariusza
Wraz ze wzrostem ilości danych ładowanych do platformy Azure rośnie potrzeba prawidłowego zarządzania tymi danymi i zarządzania nimi we wszystkich źródłach danych i użytkownikach danych. Dane, które wydają się odpowiednie w systemie źródłowym, często są mało wydajne, gdy są udostępniane. Może to mieć brakujące lub niekompletne informacje albo duplikacje i konflikty. Jego ogólna jakość może być słaba. Potrzebne są dane, które są kompletne, spójne i dokładne.
Bez wysokiej jakości danych w infrastrukturze danych platformy Azure wartość biznesowa platformy Azure jest podważana, być może krytycznie. Rozwiązaniem jest utworzenie podstaw do zapewniania ładu i zarządzania danymi, które mogą tworzyć i dostarczać źródło prawdy dla wysokiej jakości, zaufanych danych. Rozwiązania Microsoft Purview i Profisee MDM współpracują ze sobą w celu utworzenia tej platformy przedsiębiorstwa.
Usługa Microsoft Purview kataloguje wszystkie źródła danych i identyfikuje wszelkie poufne informacje i pochodzenie danych. Zapewnia architektowi danych miejsce do rozważenia odpowiednich standardów danych do nałożenia na wszystkie dane. Usługa Microsoft Purview koncentruje się na zarządzaniu w celu znajdowania, klasyfikowania i definiowania zasad i standardów. Zadania wymuszania zasad i standardów, katalogowania źródeł danych i korygowania brakujących danych należą do technologii, takich jak systemy MDM.
Profisee MDM jest przeznaczony do akceptowania danych głównych z dowolnego źródła. Profisee MDM następnie pasuje, scala, standaryzacji, weryfikuje, poprawia i synchronizuje dane między systemami. Ten proces gwarantuje, że dane mogą być prawidłowo zintegrowane i że spełniają potrzeby systemów podrzędnych, takich jak analiza biznesowa (BI) i aplikacje uczenia maszynowego. Integracyjna platforma Profisee wymusza standardy ładu w wielu silosach danych.
Lepsze razem
Rozwiązania Microsoft Purview i Profisee MDM współpracują ze sobą. Po zintegrowaniu usprawniają zadania zarządzania danymi i zapewniają, że wszystkie systemy działają w celu wymuszenia tych samych standardów. Profisee MDM publikuje swój model danych głównych w usłudze Microsoft Purview, gdzie może uczestniczyć w ładie. Następnie usługa Microsoft Purview udostępnia dane wyjściowe ładu, takie jak wykaz danych i informacje słownika. Profisee może przejrzeć dane wyjściowe i wymusić standardy. Współpracując wspólnie, firma Microsoft Purview i Profisee tworzą naturalną, lepszą synergię, która idzie głębiej niż każda niezależna oferta.
Na przykład po wykazie źródeł danych przedsiębiorstwa można określić, że dane główne znajdują się w wielu systemach. Dane główne to dane definiujące jednostkę domeny. Przykłady danych głównych to klient, produkt, zasób, lokalizacja, dostawca, pacjent, gospodarstwo domowe, element menu i dane składników. Rozpoznawanie różnych definicji i dopasowywanie i scalanie tych danych między systemami ma kluczowe znaczenie dla możliwości korzystania z tych danych w zrozumiały sposób. Aby zapewnić skuteczność, należy scalić, zweryfikować i poprawić dane główne w usłudze Profisee MDM przy użyciu definicji ładu, szczegółowych informacji i wiedzy, które zostały szczegółowo opisane w usłudze Microsoft Purview. W ten sposób firma Microsoft Purview i profisee MDM tworzą podstawę do zarządzania ładem i danymi oraz maksymalizują wartość biznesową danych na platformie Azure.
Alternatywą jest użycie dowolnych informacji, które można uzyskać. Jednak po podjęciu tego podejścia ryzykujesz generowanie wprowadzających w błąd wyników, które mogą zaszkodzić twojej firmie. Jeśli zamiast tego używasz danych głównych wysokiej jakości, eliminujesz typowe problemy z jakością danych. Następnie system dostarcza szczegółowe informacje, których można użyć do prowadzenia działalności biznesowej, niezależnie od narzędzi używanych do analizy, uczenia maszynowego i wizualizacji. Dobrze wyselekcjonowane dane główne to kluczowy aspekt tworzenia solidnej, niezawodnej podstawy danych.
W przypadku korzystania z rozwiązania Profisee MDM w usłudze Microsoft Purview występują następujące korzyści:
- Wspólna podstawa techniczna. Profisee pochodzi z technologii firmy Microsoft. Profisee i Microsoft używają typowych narzędzi, baz danych i infrastruktury, dzięki czemu rozwiązanie Profisee jest znane każdemu, kto współpracuje z technologiami firmy Microsoft. W rzeczywistości przez wiele lat profisee MDM został zbudowany na usługach Microsoft Master Data Services. Teraz usługi Master Data Services zbliżają się do końca cyklu życia, a profisee jest głównym rozwiązaniem do uaktualnienia i wymiany.
- Współpraca deweloperów i wspólne programowanie. Profisee i deweloperzy usługi Microsoft Purview współpracują w szerokim zakresie, aby zapewnić dobre, uzupełniające dopasowanie między odpowiednimi rozwiązaniami. Ta współpraca zapewnia bezproblemową integrację, która spełnia potrzeby klientów.
- Wspólna sprzedaż i wdrożenia. Profisee ma więcej wdrożeń MDM na platformie Azure i wspólnie z usługą Microsoft Purview niż jakikolwiek inny dostawca MDM. Możesz kupić profisee za pośrednictwem witryny Azure Marketplace. W roku obrachunkowym 2023 profisee jest jedynym dostawcą MDM z najwyższej klasy certyfikatem partnera firmy Microsoft, który ma infrastrukturę jako usługę (IaaS), kontenery jako usługę (CaaS) lub ofertę oprogramowania jako usługi (SaaS) w witrynie Azure Marketplace.
- Szybkie i niezawodne wdrażanie. Krytyczną funkcją całego oprogramowania przedsiębiorstwa jest szybkie i niezawodne wdrażanie. Zgodnie z platformą Szczegółowe informacje peer firmy Gartner profisee ma więcej implementacji, które potrwają mniej niż 90 dni niż jakikolwiek inny dostawca MDM.
- Wiele domen. Profisee oferuje podejście do zarządzania urządzeniami przenośnymi, które z założenia korzysta z wielu domen. Nie ma żadnych ograniczeń dotyczących liczby domen danych głównych, które można utworzyć. Ten projekt dobrze pasuje do klientów, którzy planują modernizację swoich majątku danych. Klient może zacząć od ograniczonej liczby domen, ale ostatecznie skorzysta z maksymalizacji zasięgu domeny w całej infrastrukturze danych. To pokrycie domeny jest dopasowane do pokrycia ładu danych.
- Inżynieria przeznaczona dla platformy Azure. Profisee jest zaprojektowana jako natywna dla chmury z opcjami wdrożeń SaaS i zarządzanych wdrożeń IaaS lub CaaS na platformie Azure.
Potencjalne przypadki użycia
Aby uzyskać szczegółową listę przypadków użycia rozwiązania MDM, zobacz Przypadki użycia rozwiązania MDM w dalszej części tego artykułu. Kluczowe przypadki użycia rozwiązania MDM obejmują następujące przykłady sprzedaży detalicznej i produkcji:
- Konsolidowanie danych klientów na potrzeby analizy.
- Mając 360-stopniowy widok danych produktu w spójnym i dostępnym formularzu, takim jak nazwa, opis i cechy każdego produktu.
- Ustanawianie danych referencyjnych w celu spójnego rozszerzania opisów danych głównych. Na przykład dane referencyjne obejmują listy krajów/regionów, walut, kolorów, rozmiarów i jednostek miary.
Te rozwiązania MDM pomagają również organizacjom finansowym, które w dużym stopniu korzystają z danych dotyczących krytycznych działań, takich jak raportowanie terminowe.
Integracja rozwiązania MDM z usługą Microsoft Purview
Na poniższym diagramie przedstawiono szczegółowo integrację profisee MDM w usłudze Microsoft Purview. Aby zapewnić obsługę tej integracji, podsystem zarządzania profisee zapewnia dwukierunkową integrację z usługą Microsoft Purview, która składa się z dwóch odrębnych przepływów:
- Publikowanie metadanych rozwiązania odbywa się, gdy osoby modelujące dane wprowadzają zmiany w głównym modelu danych, pasujące strategie i powiązane podartyfacje. Te zmiany są bezproblemowo publikowane w usłudze Microsoft Purview w miarę ich występowania. Opublikowanie tych zmian synchronizuje metadane powiązane z głównym modelem danych i rozwiązaniem. W związku z tym Wykaz danych w Microsoft Purview jest jeszcze bardziej wypełniona, a usługa Microsoft Purview zawiera rekord tego krytycznego źródła danych.
- Szczegóły ładu są zwracane i udostępniane stewardom danych i użytkownikom biznesowym. Te szczegóły są dostępne jako użytkownicy wyświetlają dane, wzbogacają dane i korygują problemy z jakością danych przy użyciu portalu Profisee FastApp.
Możliwości integracji usługi Microsoft Purview
Katalog i słownik usługi Microsoft Purview mogą pomóc zmaksymalizować integrację.
Projekt głównego modelu danych
Jednym z wyzwań związanych z przygotowaniem rozwiązania MDM jest określenie, co stanowi dane główne i które źródła danych mają być używane podczas wypełniania głównego modelu danych. Możesz użyć usługi Microsoft Purview, aby pomóc w tym wysiłku. Możesz skorzystać z możliwości skanowania krytycznych źródeł danych, a także zaangażować stewardów danych i ekspertów w sprawach zewnętrznych (MŚP). Dzięki temu możesz wzbogacić Wykaz danych w Microsoft Purview o informacje, do których administratorzy mogą uzyskiwać dostęp, aby lepiej dopasować model danych głównych do systemów biznesowych. Możesz uzgodnić terminologię powodującą konflikt. Ten proces daje model danych głównych, który optymalnie odzwierciedla terminologię i definicje, które mają zostać znormalizowane dla twojej firmy. Pozwala również uniknąć nieaktualnego i wprowadzającego w błąd czasownika.
Poniższy fragment z szerszego diagramu ilustruje ten przypadek użycia integracji. Najpierw używasz funkcji skanowania systemu Microsoft Purview do pozyskiwania metadanych z systemów biznesowych. Następnie stewardzy danych i MŚP przygotowują solidny wykaz i kontakty. Następnie osoby modelujące dane współpracujące z profisee MDM modeling services mogą przygotować i rozwinąć główny model danych. Ta praca jest zgodna ze standardami zdefiniowanymi w usłudze Microsoft Purview.
W miarę rozwoju modelu przez stewardów danych usługi modelowania w ramach platformy Profisee MDM publikują zmiany odbierane przez profisee MDM. Z kolei profisee MDM przygotowuje i przekazuje te zmiany do usługi Microsoft Purview w celu włączenia ich do zaktualizowanego wykazu danych. Te dodatki do wykazu zapewniają, że definicje danych głównych znajdują się w szerszym środowisku danych i że mogą być zarządzane i kontrolowane w taki sam sposób, jak metadane systemu biznesowego. Dzięki zapewnieniu, że te informacje są razem katalogowane, jesteś w lepszej sytuacji, aby zarządzać relacjami między danymi głównymi a danymi systemu biznesowego.
Zarządzanie danymi
Duże przedsiębiorstwa, które mają odpowiednio złożone i ekspansywne nieruchomości danych, mogą stanowić wyzwania dla stewardów danych, którzy są odpowiedzialni za zarządzanie i korygowanie problemów w miarę ich powstawania. Kluczowe domeny danych mogą być złożone, z wieloma niejasnymi atrybutami, które tylko pracownicy, którzy mają znaczącą wiedzę instytucjonalną. Dzięki integracji profisee MDM z usługą Microsoft Purview możesz przechwycić tę wiedzę instytucjonalną w usłudze Microsoft Purview i udostępnić ją do użycia w ramach profisee MDM. W rezultacie można złagodzić duże zapotrzebowanie na wiedzę na temat danych firmowych podczas zarządzania informacjami krytycznymi i poufnymi czasowo.
Na poniższej ilustracji przedstawiono przepływ informacji od firmy Microsoft Purview do stewardów danych, którzy pracują w portalu Profisee FastApp. Usługa danych ładu integruje się z usługami Microsoft Purview i Microsoft Entra ID. Ta usługa udostępnia funkcje wyszukiwania. Użytkownicy portalu FastApp mogą używać tej funkcji do pobierania wzbogaconych danych ładu dotyczących jednostek i atrybutów, z którymi pracują.
Usługi ładu rozpoznają również kontakty otrzymane od firmy Microsoft Purview do ich pełnych szczegółów profilu, które są dostępne w identyfikatorze Entra firmy Microsoft. Dzięki pełnym szczegółom profilu stewardzy mogą efektywnie współpracować z właścicielami danych i ekspertami, którzy pracują nad zwiększeniem jakości danych głównych.
Okno dialogowe Profisee MDM Governance to interfejs, za pomocą którego stewardzy danych i użytkownicy wchodzą w interakcje ze szczegółami poziomu ładu. Ten interfejs użytkownika renderuje informacje uzyskane z usługi Microsoft Purview do użytkowników. Korzystając z tych informacji, użytkownicy mogą przejrzeć szczegóły dotyczące danych, z których uruchomiono okno dialogowe. Jeśli informacje podane w oknie dialogowym Ład są niewystarczające, użytkownicy mogą przejść bezpośrednio do środowiska użytkownika usługi Microsoft Purview.
Stewardzy danych i użytkownicy biznesowi mogą uzyskiwać dostęp do trzech typów zasobów danych profisee MDM za pośrednictwem portalu FastApp:
- Wystąpienie profisee, które zapewnia właściwości infrastruktury konkretnego wystąpienia platformy Profisee MDM, którą użytkownik wyświetla
- Profisee Entity, która udostępnia właściwości jednostki danych głównych (tabeli), które są obecnie wyświetlane przez stewarda lub użytkownika
- Profisee Attribute , który udostępnia właściwości atrybutu (np. pole lub kolumna), w którym użytkownik jest zainteresowany
Na poniższej ilustracji przedstawiono, gdzie użytkownicy pracujący w portalu FastApp mogą wyświetlać szczegóły ładu dla każdego z tych typów zasobów. Szczegółowe informacje na poziomie wystąpienia można znaleźć w menu Pomoc . Możesz uzyskać dostęp do szczegółów jednostki z nagłówka strefy strony, który zawiera siatkę jednostek. Aby uzyskać szczegółowe informacje o atrybucie, przejdź do formularza skojarzonego z siatką jednostek. Uzyskaj dostęp do szczegółów z etykiet skojarzonych z atrybutem.
Aby wyświetlić informacje podsumowujące, umieść wskaźnik myszy na ikonie ładu, takiej jak Microsoft Purview. Wybierz ikonę, aby wyświetlić pełne okno dialogowe nadzoru:
Aby przejść do pełnego środowiska użytkownika usługi Microsoft Purview, wybierz ikonę ładu w nagłówku okna dialogowego. Wybranie ikony spowoduje przejście do usługi Microsoft Purview w kontekście aktualnie wyświetlanego zasobu. Następnie możesz łatwo poruszać się w usłudze Microsoft Purview w zależności od potrzeb odnajdywania.
Przetwarzanie zarządzania urządzeniami przenośnymi
Możliwości rozwiązania MDM znajdują się w szczegółach.
Modelowanie danych
Sercem rozwiązania MDM jest bazowy model danych. Reprezentuje definicję danych głównych w firmie. Tworzenie modelu danych głównych obejmuje następujące zadania:
- Zidentyfikuj elementy danych źródłowych z poziomu systemów, które mają kluczowe znaczenie dla operacji firmy i mają kluczowe znaczenie dla analizowania wydajności.
- Wzbogacanie modelu o elementy uzyskiwane z innych źródeł innych firm, które renderuje dane bardziej przydatne, dokładne i wiarygodne.
- Ustanów wyraźną własność i uprawnienia związane z elementami modelu danych. Ta praktyka pomaga zapewnić widoczność i zarządzanie zmianami w projekcie modelu.
Nadzór nad danymi zapewnia kluczową podstawę wsparcia:
- Katalog danych ładu, słownik, słownik i zasoby pomocnicze są nieocenionymi źródłami informacji dla stewardów danych ładu. Te zasoby pomagają stewardom określić, co należy uwzględnić w modelu danych głównych. Pomagają one również określić własność i poufne klasyfikacje danych w usłudze Microsoft Purview. Możesz wzmocnić terminologię w modelu. Dzięki tej praktyce możesz ustanowić oficjalny leksykon dla swojej firmy. Dzięki zintegrowaniu terminologii główny model danych może również tłumaczyć wszelkie terminy ezoteryczne, które są używane w różnych systemach źródłowych do zatwierdzonego języka firmy.
- Systemy innych firm są często źródłem danych głównych, które są oddzielone od systemów biznesowych. Niezwykle ważne jest dodanie elementów do modelu w celu przechwycenia informacji dodanych przez te systemy do danych oraz odzwierciedlenia tych źródeł informacji z powrotem do katalogu danych.
- Możesz użyć własności i dostępu do danych, jak określono w katalogu ładu, aby wymusić uprawnienia dostępu i zmiany zarządzania w rozwiązaniu MDM. W rezultacie dopasowujesz zasady i potrzeby firmy do narzędzi używanych do zarządzania danymi głównymi i zarządzania nimi.
Ładowanie danych źródłowych
W idealnym przypadku różne systemy biznesowe ładują dane do modelu danych głównych z niewielką zmianami lub bez zmian ani transformacji. Celem jest posiadanie scentralizowanej wersji danych, która istnieje w systemie źródłowym. Między systemem źródłowym a repozytorium danych głównych powinno istnieć jak najmniejsza utrata wierności. Ograniczając złożoność procesu ładowania, upraszczasz pochodzenie danych. A jeśli używasz technologii, takiej jak potoki usługi Data Factory, rozwiązanie do zapewniania ładu może sprawdzić przepływ. Następnie rozwiązanie może zidentyfikować relacje między systemem źródłowym a głównym modelem danych. W szczególności rozwiązanie może wyodrębniać dane z systemów źródłowych przy użyciu dowolnego z ponad 100 wstępnie utworzonych łączników i bramy REST.
Wzbogacanie i standaryzacja danych
Po załadowaniu danych źródłowych do modelu można je rozszerzyć, wykorzystując zaawansowane źródła danych innych firm. Za pomocą tych systemów można ulepszyć dane uzyskiwane z systemów biznesowych. Można również użyć tych systemów do rozszerzania danych źródłowych o informacje, które zwiększają jego wykorzystanie dla innych odbiorców podrzędnych. Na przykład:
- Możesz użyć usług weryfikacji adresów, takich jak Bing, aby poprawić i poprawić adresy systemu źródłowego. Te usługi mogą standandaryzować i dodawać brakujące informacje, które mają kluczowe znaczenie dla lokalizacji geograficznej i dostarczania poczty.
- Usługi informacyjne innych firm, takie jak Dun & Bradstreet, mogą udostępniać dane ogólnego przeznaczenia lub specyficzne dla branży. Za pomocą tych danych można rozszerzyć wartość złotego rekordu głównego. W szczególności możesz dodać informacje, które były niedostępne lub w konflikcie w różnych systemach biznesowych.
Infrastruktura publikowania/subskrybowania profisee ułatwia integrowanie własnych źródeł innych firm z rozwiązaniem zgodnie z potrzebami.
Możliwość zrozumienia źródeł i znaczenia tych danych jest tak krytyczna dla danych innych firm, jak w przypadku wewnętrznych systemów biznesowych. Integrując model danych głównych z wykazem danych ładu, można zarządzać relacjami między wewnętrznymi i zewnętrznymi źródłami danych, wzbogacając model ze szczegółami ładu.
Weryfikacja jakości danych i zarządzanie
Po załadowaniu i wzbogaceniu danych ważne jest sprawdzenie ich pod kątem jakości i zgodności ze standardami, które ustanowisz za pośrednictwem procesów zapewniania ładu. Usługa Microsoft Purview może być ponownie bogatym źródłem informacji o standardach. Możesz użyć usługi Microsoft Purview, aby określić reguły jakości danych wymuszane przez rozwiązanie MDM. Profisee MDM może również publikować reguły jakości danych jako zasoby w katalogu ładu. Zasady mogą podlegać przeglądowi i zatwierdzeniu, co ułatwia zapewnienie najwyższego nadzoru nad standardami jakości, które są skojarzone z danymi głównymi. Reguły są powiązane z jednostkami i atrybutami danych głównych, a te atrybuty można prześledzić z powrotem do systemu źródłowego. Z tych powodów można ustalić główną przyczynę niskiej jakości danych pochodzącej z systemów biznesowych.
Stewardzy danych są ekspertami w swojej domenie biznesowej. W miarę rozwiązywania problemów, które ujawnia twoje rozwiązanie danych głównych, mogą korzystać z wykazu nadzoru danych usługi Microsoft Purview. Katalog pomaga stewardom zrozumieć i rozwiązać problemy z jakością w miarę ich powstawania. Poparte wsparciem właścicieli danych i ekspertów, stewardzy są przygotowani do szybkiego i dokładnego rozwiązywania problemów z jakością danych.
Dopasowywanie i ocalałych
Dzięki wzbogaconym, wysokiej jakości danych źródłowych można utworzyć złoty wzorzec rekordów, który reprezentuje najdokładniejsze informacje w różnych systemach biznesowych. Na poniższej ilustracji pokazano, jak wszystkie kroki kończą się danymi wysokiej jakości gotowymi do użycia na potrzeby analizy biznesowej. W dowolnym momencie możesz zsynchronizować te dane między infrastrukturą danych.
Aparat dopasowania Profisee MDM produkuje złoty mistrz rekordu w ramach procesu ocalałego. Reguły ocalałych selektywnie wypełniają złoty rekord informacjami wybranymi we wszystkich systemach źródłowych.
Profisee MDM historii i podsystemu śledzenia inspekcji śledzi zmiany wprowadzone przez użytkowników. Ten podsystem śledzi również zmiany procesów systemowych, takich jak ocalałych. Dopasowanie i przetrwanie umożliwia śledzenie przepływu informacji z rekordów źródłowych do wzorca. Profisee MDM ma rekord systemu źródłowego, który jest odpowiedzialny za określony rekord źródłowy. Wiesz również, jak różne rekordy źródłowe wypełniają złoty rekord. W związku z tym można uzyskać pochodzenie danych z analizy z powrotem do danych źródłowych, do których odwołują się raporty.
Przypadki użycia rozwiązania MDM
Chociaż istnieje wiele przypadków użycia w rozwiązaniu MDM, kilka przypadków użycia obejmuje większość rzeczywistych implementacji zarządzania urządzeniami przenośnymi. Te przypadki użycia koncentrują się na jednej domenie, ale jest mało prawdopodobne, aby zostały skompilowane tylko z tej domeny. Nawet te ukierunkowane przypadki użycia najprawdopodobniej obejmują wiele domen. W każdym przypadku użycia rozwiązanie MDM spełnia cel zapewnienia 360 stopni lub ujednoliconego widoku podstawowych typów danych.
Dane klienta
Konsolidacja i standaryzacja danych klientów na potrzeby analizy analizy biznesowej jest najczęstszym przypadkiem użycia rozwiązania MDM. Organizacje przechwytują dane klientów w coraz większej liczbie systemów i aplikacji. Wynik zduplikowanych rekordów danych klienta. Te duplikaty znajdują się w aplikacjach i znajdują się w nich oraz zawierają niespójności i rozbieżności. Niska jakość danych klientów ogranicza wartość nowoczesnych rozwiązań analitycznych. Objawy obejmują następujące wyzwania:
- Trudno odpowiedzieć na podstawowe pytania biznesowe, takie jak "KtoTo są naszymi najlepszymi klientami?" i "Ilu nowych klientów mamy?" Udzielenie odpowiedzi na te pytania wymaga znacznego nakładu pracy ręcznej.
- Brakuje i niedokładne informacje o kliencie, co utrudnia ich zwijanie lub przechodzenie do szczegółów danych.
- Nie możesz jednoznacznie zidentyfikować lub zweryfikować klienta w granicach organizacyjnych i systemowych. W związku z tym nie możesz analizować danych klientów w systemach lub jednostkach biznesowych.
- Masz słabe informacje na temat sztucznej inteligencji i uczenia maszynowego ze względu na niską jakość danych wejściowych.
Dane produktu
Dane produktów są często rozmieszczone w wielu aplikacjach dla przedsiębiorstw, takich jak planowanie zasobów przedsiębiorstwa (ERP), zarządzanie cyklem życia produktu (PLM) lub aplikacje do handlu elektronicznego. W związku z tym trudno jest zrozumieć całkowity wykaz produktów, które mają niespójne definicje właściwości, takie jak nazwa produktu, opis i cechy. Różne definicje danych referencyjnych komplikują tę sytuację. Objawy obejmują następujące wyzwania:
- Nie możesz obsługiwać różnych alternatywnych hierarchicznych ścieżek zestawienia i przechodzenia do szczegółów na potrzeby analizy produktów.
- W przypadku gotowych towarów lub zapasów materiałów masz trudności z oceną zapasów produktów i ustalonymi dostawcami. Masz również zduplikowane produkty, co prowadzi do nadmiaru zapasów.
- Trudno jest racjonalizować produkty z powodu sprzecznych definicji. Taka sytuacja prowadzi do braku lub niedokładnych informacji w analizie.
Dane referencyjne
W kontekście analizy dane referencyjne istnieją jako liczne listy danych. Te listy są często używane do dalszego opisywania innych zestawów danych głównych. Na przykład dane referencyjne obejmują listy krajów/regionów, walut, kolorów, rozmiarów i jednostek miary. Niespójne dane referencyjne prowadzą do oczywistych błędów w analizie podrzędnej. Objawy to:
- Wiele reprezentacji tej samej wartości. Na przykład stan Gruzji jest wymieniony jako GA i Georgia, co utrudnia spójne agregowanie i przechodzenie do danych.
- Trudności ze strumieniowym przesyłaniem danych między systemami z powodu braku możliwości przejścia na skrzyżowanie lub mapowania odwołują się do wartości danych między systemami. Na przykład kolor czerwony jest reprezentowany przez język R w systemie ERP i Czerwony w systemie PLM.
- Trudności z wiązaniem liczb w organizacjach z powodu różnic w ustalonych wartościach danych referencyjnych używanych do kategoryzacji danych.
Dane finansowe
Organizacje finansowe w dużym stopniu opierają się na danych dotyczących krytycznych działań, takich jak miesięczne, kwartalne i roczne raportowanie. Organizacje, które mają wiele systemów finansowych i księgowych, często mają dane finansowe w wielu ogólnych rejestrach, które należy skonsolidować w celu tworzenia raportów finansowych. Rozwiązanie MDM może zapewnić scentralizowane centrum do mapowania kont, centrów kosztów, jednostek biznesowych i innych zestawów danych finansowych oraz zarządzania nimi. Dzięki scentralizowanym koncentratorom rozwiązanie MDM zapewnia skonsolidowany widok tych zestawów danych. Objawy obejmują następujące wyzwania:
- Trudności z agregowaniem danych finansowych w wielu systemach w skonsolidowanym widoku
- Brak procesu dodawania i mapowania nowych elementów danych w systemach finansowych
- Opóźnienia w tworzeniu raportów finansowych zakończonych okresem
Kwestie wymagające rozważenia
Te zagadnienia implementują filary struktury Azure Well-Architected Framework, która jest zestawem wytycznych, które mogą służyć do poprawy jakości obciążenia. Aby uzyskać więcej informacji, zobacz Microsoft Azure Well-Architected Framework.
Podczas wybierania rozwiązania do zarządzania danymi dla organizacji należy wziąć pod uwagę te czynniki.
Niezawodność
Niezawodność zapewnia, że aplikacja może spełnić zobowiązania podjęte przez klientów. Aby uzyskać więcej informacji, zobacz Omówienie filaru niezawodności.
Profisee działa natywnie w usługach Azure Kubernetes Service (AKS) i Azure SQL Database. Obie usługi oferują gotowe do użycia funkcje w celu zapewnienia wysokiej dostępności.
Zabezpieczenia
Zabezpieczenia zapewniają ochronę przed celowymi atakami i nadużyciami cennych danych i systemów. Aby uzyskać więcej informacji, zobacz Omówienie filaru zabezpieczeń.
Profisee uwierzytelnia użytkowników przy użyciu interfejsu OpenID Połączenie, który implementuje przepływ uwierzytelniania OAuth 2.0. Większość organizacji konfiguruje rozwiązanie Profisee MDM w celu uwierzytelniania użytkowników względem identyfikatora Entra firmy Microsoft, co gwarantuje, że można zastosować i wymusić zasady przedsiębiorstwa na potrzeby uwierzytelniania.
Optymalizacja kosztów
Optymalizacja kosztów dotyczy sposobów zmniejszenia niepotrzebnych wydatków i poprawy wydajności operacyjnej. Aby uzyskać więcej informacji, zobacz Omówienie filaru optymalizacji kosztów.
Koszty działania składają się z licencji na oprogramowanie i użycia platformy Azure. Aby uzyskać więcej informacji, skontaktuj się z profisee.
Efektywność wydajności
Efektywność wydajności to możliwość skalowania obciążenia w celu zaspokojenia zapotrzebowania użytkowników w wydajny sposób. Aby uzyskać więcej informacji, zobacz Omówienie filaru wydajności.
Profisee MDM działa natywnie w usługach AKS i SQL Database. Usługę AKS można skonfigurować do skalowania profisee MDM w górę, w dół i we wszystkich funkcjach biznesowych. Usługę SQL Database można wdrożyć w wielu konfiguracjach, aby zrównoważyć wydajność, skalowalność i koszty.
Dynamiczne skalowanie jest nieodłączną architekturą natywną dla chmury profisee, która korzysta z mikrousług i kontenerów. Jeśli uruchamiasz profisee w dzierżawie chmury za pośrednictwem platformy Kubernetes, możesz dynamicznie skalować w górę i w poziomie na podstawie obciążenia. Dzięki usłudze Profisee SaaS działającej w usłudze AKS można skonfigurować duże pule węzłów dla zasobników. Pule te są skalowane dynamicznie na podstawie obciążenia systemu w całej infrastrukturze wielodostępnych.
Aby uzyskać szczegółowe informacje na temat wdrażania rozwiązań Profisee i Microsoft Purview w usłudze AKS, zobacz Integracja rozwiązania Microsoft Purview — Profisee MDM.
Wdrażanie tego scenariusza
Profisee MDM to spakowana usługa Kubernetes. Możesz wdrożyć rozwiązanie Profisee MDM jako rozwiązanie PaaS w dzierżawie platformy Azure, w dowolnej innej dzierżawie chmury lub lokalnie. Możesz również wdrożyć profisee MDM jako rozwiązanie SaaS, które profisee hostuje i zarządza.
Współautorzy
Ten artykuł jest obsługiwany przez firmę Microsoft. Pierwotnie został napisany przez następującego współautora.
Główny autor:
- Gaurav Malhotra | Główny menedżer pm grupy
Aby wyświetlić niepubalne profile serwisu LinkedIn, zaloguj się do serwisu LinkedIn.
Następne kroki
- Poznaj możliwości łącznika kopiowania REST w usłudze Data Factory.
- Dowiedz się więcej o usłudze Profisee działającej natywnie na platformie Azure.
- Dowiedz się, jak wdrożyć profisee na platformie Azure przy użyciu szablonu usługi Azure Resource Manager (szablonu usługi ARM).
- Wyświetl szablony usługi Data Factory profisee.
Powiązane zasoby
Przewodniki dotyczące architektury:
- Wyodrębnianie, transformacja i ładowanie (ETL)
- Wybieranie technologii przetwarzania wsadowego na platformie Azure
Architektury referencyjne:
- Zarządzanie danymi głównymi za pomocą profisee i usługi Azure Data Factory
- Kompleksowa analiza w usłudze Azure Synapse
- Nowoczesna architektura analizy za pomocą usługi Azure Databricks
- Analiza danych big data z zabezpieczeniami klasy korporacyjnej przy użyciu usługi Azure Synapse
- Zautomatyzowana analiza biznesowa przedsiębiorstwa
- Optymalizowanie marketingu przy użyciu uczenia maszynowego
- Analiza biznesowa przedsiębiorstwa