Data Factory 계보 데이터를 Microsoft Purview로 푸시

아티클
05/15/2024

적용 대상: Azure Data Factory Azure Synapse Analytics

팁

기업용 올인원 분석 솔루션인 Microsoft Fabric의 Data Factory를 사용해 보세요. Microsoft Fabric은 데이터 이동부터 데이터 과학, 실시간 분석, 비즈니스 인텔리전스 및 보고에 이르기까지 모든 것을 다룹니다. 무료로 새 평가판을 시작하는 방법을 알아봅니다!

이 자습서에서는 Data Factory UI(사용자 인터페이스)를 사용하여 작업을 실행하고 계보 데이터를 Microsoft Purview 계정에 보고하는 파이프라인을 만듭니다. 그런 다음 Microsoft Purview 계정에서 모든 계보 정보를 볼 수 있습니다.

현재 계보는 복사, Data Flow 및 SSIS 실행 작업에 대해 지원됩니다. 지원되는 Azure Data Factory 작업에서 지원되는 기능에 대한 자세한 내용을 알아봅니다.

필수 조건

Azure 구독. Azure 구독이 아직 없는 경우 시작하기 전에 Azure 체험 계정을 만듭니다.
Azure Data Factory. Azure Data Factory가 없는 경우 Azure Data Factory 만들기를 참조하세요.
Microsoft Purview 계정. Microsoft Purview 계정은 데이터 팩터리에서 생성된 모든 계보 데이터를 캡처합니다. Microsoft Purview 계정이 없는 경우 Microsoft Purview 만들기를 참조하세요.

파이프라인을 실행하고 계보 데이터를 Microsoft Purview로 푸시

1단계: Data Factory를 Microsoft Purview 계정에 연결

Data Factory를 Microsoft Purview에 연결의 단계에 따라 Data Factory와 Microsoft Purview 계정 간의 연결을 설정할 수 있습니다.

2단계: Data Factory에서 파이프라인 실행

Data Factory에서 파이프라인, 복사 작업 및 데이터 흐름 작업을 만들 수 있습니다. 계보 데이터 캡처에 대한 추가 구성은 필요하지 않습니다. 계보 데이터는 작업 실행 중에 자동으로 캡처됩니다.

Screenshot of Copy and Dataflow activity.

Screenshot of Execute SSIS Package activity.

Azure Data Factory를 사용하여 Azure Blob Storage에서 Azure SQL Database의 데이터베이스로 데이터 복사, 데이터 흐름 매핑을 사용하여 데이터 변환 및 Azure에서 SSIS 패키지 실행에서 복사, Data Flow 및 SSIS 실행 작업을 만드는 방법을 알아봅니다.

3단계: 계보 보고 상태 모니터링

파이프라인을 실행한 후 파이프라인 모니터링 보기에서 다음 계보 상태 단추를 클릭하여 계보 보고 상태를 확인할 수 있습니다. 작업 출력 JSON ->reportLineageToPurvew 섹션에서도 동일한 정보를 사용할 수 있습니다.

Monitor the lineage reporting status in pipeline monitoring view.

4단계: Microsoft Purview 계정에서 계보 정보 보기

Microsoft Purview UI에서 자산을 찾아보고 "Azure Data Factory" 형식을 선택할 수 있습니다. 키워드를 사용하여 Data Catalog를 검색할 수도 있습니다.

작업 자산에서 계보 탭을 클릭하면 모든 계보 정보를 볼 수 있습니다.

복사 작업:
Data Flow 작업:

참고 항목

데이터 흐름 작업의 계보의 경우 원본 및 싱크만 지원됩니다. 데이터 흐름 변환의 계보는 아직 지원되지 않습니다.
SSIS 패키지 실행 작업:

참고 항목

SSIS 패키지 실행 작업의 계보의 경우 원본 및 대상만 지원됩니다. 변환의 계보는 아직 지원되지 않습니다.