패브릭의 미러링이란?

데이터 복제본(replica)tion 솔루션인 Fabric의 미러링(Mirroring in Fabric)은 다양한 시스템의 데이터를 단일 분석 플랫폼으로 통합하는 저비용 및 짧은 대기 시간 솔루션입니다. Azure SQL Database, Azure Cosmos DB 및 Snowflake의 데이터를 포함하여 기존 데이터 자산을 Fabric의 OneLake에 지속적으로 복제본(replica).

OneLake에서 쿼리 가능한 형식의 최신 데이터를 사용하면 이제 Spark로 분석 실행, Notebook 실행, 데이터 엔지니어링, Power BI 보고서 시각화 등 패브릭의 모든 다른 서비스를 사용할 수 있습니다.

Fabric의 미러링을 사용하면 분석 요구 사항을 간소화하도록 설계된 고도로 통합되고 엔드 투 엔드 및 사용하기 쉬운 제품을 즐길 수 있습니다. Microsoft 간의 개방성과 공동 작업 및 오픈 소스 Delta Lake 테이블 형식을 읽을 수 있는 기술 솔루션을 위해 빌드된 미러링(Mirroring)은 모든 분석 요구 사항에 사용할 수 있는 OneLake에서 데이터의 복제본(replica) 만들 수 있는 저렴한 비용 및 짧은 대기 시간 턴키 솔루션입니다.

그러면 델타 테이블을 패브릭의 모든 곳에서 사용할 수 있으므로 사용자가 Fabric으로의 여정을 가속화할 수 있습니다.

Important

이 기능은 미리 보기로 제공됩니다.

패브릭에서 미러링을 사용하는 이유는 무엇인가요?

오늘날 많은 조직에서 업무상 중요한 운영 또는 분석 데이터가 사일로에 있습니다.

현재 이 데이터에 액세스하고 작업하려면 복잡한 ETL(변환 로드 추출) 파이프라인, 비즈니스 프로세스 및 의사 결정 사일로가 필요합니다.

  • 중요하고 항상 변경되는 데이터에 대한 액세스가 제한되고 제한됨
  • 사람, 프로세스 및 기술 간의 마찰
  • 매우 중요한 데이터에 대한 데이터 파이프라인 및 프로세스를 만들기 위한 긴 대기 시간
  • 인사이트를 편안하게 분석하고 공유하는 데 필요한 도구를 자유롭게 사용할 수 없습니다.
  • 사람들이 데이터를 공유하고 공동 작업할 수 있는 적절한 기반이 부족합니다.
  • BI, AI, 통합, 엔지니어링 및 앱 등 모든 분석 시나리오에 대해 일반적인 개방형 데이터 형식이 없습니다.

패브릭의 미러링을 사용하면 인사이트 및 의사 결정에 대한 가치 창출 시간을 단축하고 기술 솔루션 간의 데이터 사일로를 세분화할 수 있는 간편한 환경을 제공합니다.

  • BI 및 AI용 기본 제공 분석을 사용하여 SaaS 데이터 레이크로 데이터를 거의 실시간으로 복제본(replica)

Microsoft Fabric 플랫폼은 SaaS(Software as a Service)의 기초를 기반으로 하며, 단순성과 통합을 완전히 새로운 수준으로 끌어올립니다. Microsoft Fabric 에 대한 자세한 내용은 Microsoft Fabric이란?

미러링에서는 패브릭 작업 영역에 다음 세 개의 항목을 만듭니다.

  • 미러링에서는 데이터를 OneLake복제본(replica) 분석 가능한 형식으로 Parquet으로 변환합니다. 이를 통해 데이터 엔지니어링, 데이터 과학 등과 같은 다운스트림 시나리오를 사용할 수 있습니다.
  • SQL 분석 엔드포인트
  • 기본 의미 체계 모델

Microsoft Fabric SQL 쿼리 편집기 외에도 SQL Server Management Studio, Azure Data StudioGitHubCopilot를 비롯한 광범위한 도구 에코시스템이 있습니다.

공유 를 사용하면 액세스 제어 및 관리가 용이하여 중요한 정보에 대한 액세스를 제어할 수 있습니다. 또한 공유를 통해 조직 전체에서 안전하고 민주화된 의사 결정을 내릴 수 있습니다.

내 테넌트에서 미러링을 사용하도록 설정할 어떻게 할까요? 있나요?

Power BI 관리자는 Power BI 관리 포털에 있는 설정을 사용하여 전체 조직 또는 특정 보안 그룹에 대해 미러링을 사용하거나 사용하지 않도록 설정할 수 있습니다. 그런 다음 미러링 항목이 만들기 옵션에 표시됩니다. 자세한 내용은 Microsoft Fabric 테넌트에서 미러링 사용 설정을 참조하세요.

현재 다음 외부 데이터베이스는 미리 보기로 제공됩니다.

플랫폼 거의 실시간 복제본(replica) 엔드 투 엔드 자습서
Azure Cosmos DB에서 Microsoft Fabric 미러 데이터베이스 자습서: Azure Cosmos DB
Azure SQL Database에서 Microsoft Fabric 미러 데이터베이스 자습서: Azure SQL Database
Snowflake에서 Microsoft Fabric 미러 데이터베이스 자습서: Snowflake

미러링의 거의 실시간으로 복제본(replica) 작동하나요?

운영 데이터 원본에 대한 보안 연결을 만들어 미러링을 사용하도록 설정합니다. 전체 데이터베이스 또는 개별 테이블을 복제본(replica) 선택할지 여부를 선택하면 미러링이 자동으로 데이터를 동기화 상태로 유지합니다. 설정되면 데이터는 분석 사용을 위해 OneLake에 지속적으로 복제본(replica).

미러링의 핵심 개념은 다음과 같습니다.

  • 패브릭에서 미러링을 사용하도록 설정하는 것은 복잡한 ETL 파이프라인을 만들고, 다른 컴퓨팅 리소스를 할당하고, 데이터 이동을 관리할 필요 없이 간단하고 직관적입니다.

  • 패브릭의 미러링이 완전히 관리되는 서비스이므로 미러 연결의 호스팅, 기본복제본(replica) 구성 또는 관리에 대해 걱정할 필요가 없습니다.

공유

공유를 사용하면 액세스 제어 및 관리가 용이하며, RLS(행 수준 보안) 및 OLS(개체 수준 보안)와 같은 보안 제어를 통해 중요한 정보에 대한 액세스를 제어할 수 있습니다. 또한 공유를 통해 조직 전체에서 안전하고 민주화된 의사 결정을 내릴 수 있습니다.

공유를 통해 사용자는 작업 영역 및 나머지 항목에 대한 액세스 권한을 부여하지 않고 다른 사용자 또는 사용자 그룹에 미러 데이터베이스에 대한 액세스 권한을 부여합니다. 다른 사용자가 미러 데이터베이스를 공유하는 경우 SQL 분석 엔드포인트 및 연결된 기본 의미 체계 모델에 대한 액세스 권한도 부여합니다.

작업 영역 보기에서 미러 데이터베이스 이름 옆에 있는 공유 단추를 사용하여 공유 대화 상자에 액세스합니다. 공유 미러 데이터베이스는 OneLake 데이터 허브 또는 Microsoft Fabric의 Shared with Me 섹션을 통해 찾을 수 있습니다.

자세한 내용은 웨어하우스 공유 및 권한 관리를 참조 하세요.

데이터베이스 간 쿼리

OneLake에 저장된 미러 데이터베이스의 데이터를 사용하여 단일 T-SQL 쿼리에서 미러 데이터베이스, 웨어하우스 및 Lakehouses의 SQL 분석 엔드포인트에서 데이터를 조인하여 데이터베이스 간 쿼리를 작성할 수 있습니다. 자세한 내용은 데이터베이스 간 쿼리 작성을 참조하세요.

예를 들어 세 부분으로 구성된 이름을 사용하여 미러 데이터베이스 및 웨어하우스에서 테이블을 참조할 수 있습니다. 다음 예제에서는 세 부분으로 구성된 이름을 사용하여 웨어하우스ContosoWarehouse에서 참조합니다ContosoSalesTable. 다른 데이터베이스 또는 웨어하우스에서 표준 SQL 세 부분으로 구성된 명명 규칙의 첫 번째 부분은 미러 데이터베이스의 이름입니다.

SELECT * 
FROM ContosoWarehouse.dbo.ContosoSalesTable AS Contoso
INNER JOIN Affiliation
ON Affiliation.AffiliationId = Contoso.RecordTypeID;

미러 데이터베이스 데이터로 데이터 엔지니어

Microsoft Fabric은 데이터에 쉽게 액세스할 수 있고, 잘 구성되고, 고품질이 되도록 다양한 데이터 엔지니어링 기능을 제공합니다. Fabric 데이터 엔지니어ing에서 다음을 수행할 수 있습니다.

  • Lakehouse를 사용하여 Spark로 데이터 만들기 및 관리
  • 레이크하우스에 데이터를 복사하는 파이프라인 디자인
  • Spark 작업 정의를 사용하여 Spark 클러스터에 일괄 처리/스트리밍 작업 제출
  • Notebook을 사용하여 데이터 수집, 준비 및 변환에 대한 코드 작성

미러 데이터베이스 데이터로 데이터 과학

Microsoft Fabric은 사용자가 데이터 보강 및 비즈니스 인사이트를 위해 엔드 투 엔드 데이터 과학 워크플로를 완료할 수 있도록 하는 Synapse 데이터 과학 제공합니다. 데이터 탐색, 준비 및 클린부터 실험, 모델링, 모델 점수 매기기 및 예측 인사이트 제공에서 BI 보고서에 이르기까지 전체 데이터 과학 프로세스에서 광범위한 활동을 완료할 수 있습니다.

Microsoft Fabric 사용자는 데이터 과학 워크로드에 액세스할 수 있습니다. 여기에서 다양한 관련 리소스를 검색하고 액세스할 수 있습니다. 예를 들어 기계 학습 실험, 모델 및 Notebook을 만들 수 있습니다. 데이터 과학 홈페이지에서 기존 전자 필기장을 가져올 수도 있습니다.