Azure Synapse Link for Dataverse жүйесін Azure Synapse Workspace қызметімен жасау

Деректерді зерттеу және түсіну уақытын жеделдету мақсатында Microsoft Dataverse деректерін Azure Synapse Analytics жұмыс кеңістігіне қосу үшін Azure Synapse Link бағдарламасын пайдалануға болады. Бұл мақалада келесі тапсырмаларды орындау жолы көрсетілген:

1. Dataverse деректерін Azure Synapse Analytics жұмыс кеңістігіне Azure Synapse Link қызметінің көмегімен қосыңыз.
2. Azure Synapse Link жүйесінде қамтылған Dataverse кестелерін басқарыңыз.
3. Azure Synapse Link жүйесін бақылаңыз.
4. Azure Synapse Link бағдарламасын ажыратыңыз.
5. Azure Synapse Link жүйесін қайта байланыстырыңыз.
6. Azure Synapse Analytics жүйесінде деректеріңізді көріңіз.

Ескерім

Azure Synapse Link for Microsoft Dataverse бағдарламасы бұрын Data Lake қызметіне экспорттау ретінде белгілі болған. Қызметтің атауы 2021 жылдың мамырынан бастап өзгертілді және деректерді Azure Data Lake қызметіне және Azure Synapse Analytics қызметіне экспорттауды жалғастырады.

Алғышарттар

• Dataverse: Сізде Dataverse жүйе әкімшісі қауіпсіздік рөлі болуы керек. Сонымен қатар, Azure Synapse Link арқылы экспортталатын кестелерде Өзгерістерді бақылау сипаты қосулы болуы керек. Қосымша ақпарат: Қосымша опциялар

• Azure Data Lake Storage Gen2: сізде Azure Data Lake Storage Gen2 тіркелгісі және Жауапты және Сақтау екілік нысаны деректерінің салымшысы рөліне қатынасу болуы керек. Жад есептік жазбаңыз бастапқы орнату және дельта синхрондау үшін Иерархиялық аттар кеңістігін қосуы керек. Жад есептік жазбасының кілтіне рұқсат беру керек. бастапқы орнату үшін ғана.

• Synapse жұмыс кеңістігі: сізде Synapse жұмыс кеңістігі және Synapse студиясында Synapse әкімшісі рөлі қатынасуы болуы керек. Synapse жұмыс кеңістігі Azure Data Lake Storage Gen2 тіркелгісімен бір аймақта болуы керек. Сақтау орнының тіркелгісі Synapse студиясында байланысқан қызмет ретінде қосылуы керек. Synapse жұмыс кеңістігін жасау үшін Synapse жұмыс кеңістігін жасау бөліміне өтіңіз.

Ескерім

• Сақтау тіркелгісі және Synapse жұмыс кеңістігі сіздің Microsoft Entra жалдаушымен бірдей Power Apps жалдаушыда жасалуы керек.
• Байланыстырылған сақтау тіркелгісі мен жұмыс кеңістігі үшін Таңдалған виртуалды желілерден және IP мекенжайларынан қосылған орнату үшін, басқарылатын идентификаторлары бар Azure Synapse Link жасау керек. Қосымша ақпарат: Azure деректер көлінің қоймасымен Azure үшін басқарылатын сәйкестіктерді пайдаланыңыз (басқарылатын идентификацияларды орнатусыз, жалпы желіге кіру мүмкіндігін қосуыңыз керек >бастапқы орнатуға және дельта синхрондауға арналған Azure ресурстарына арналған.)
• Басқарылатын жеке соңғы нүктелер, деректерді эксфильтрациядан қорғау немесе басқарылатын виртуалды желілер бар Synapse жұмыс кеңістігіне қолдау көрсетілмейді.
• Сізде сақтау тіркелгісі мен Synapse жұмыс кеңістігі бар ресурстар тобына Оқушы рөлінің қатынасу рұқсаты болуы керек.
• Synapse жұмыс кеңістігіне бірнеше пайдаланушыны қосқанда, оларда Synapse студиясында Synapse әкімшісі рөлі қатынасуы және Azure Data Lake Storage Gen2 тіркелгісінде Сақтау екілік нысаны деректерінің салымшысы рөлі болуы керек.
• Бір DV ортасында Synapse Link профильдерін жасау ең көбі 10-мен шектеледі.

Dataverse жүйесін Synapse жұмыс кеңістігіне қосу

1. Power Apps бағдарламасына кіріңіз және қажетті ортаны таңдаңыз.

2. Сол жақ шарлау тақтасында Azure Synapse Link таңдаңыз. Бүйірлік тақтада Azure Synapse Link көрінбесе, ...Қосымша және Барлығын табу тармағын таңдаңыз. Azure Synapse Link Деректерді басқару бөлімінде таңдаңыз.

3. Пәрмендер жолағында + Жаңа сілтеме таңдаңыз.

4. Azure Synapse жұмыс кеңістігіңізге қосылу опциясын таңдаңыз.

5. Жазылым, Ресурс тобы, Жұмыс кеңістігінің атауы және Сақтау тіркелгісі параметрін таңдаңыз. Synapse жұмыс кеңістігі мен сақтау тіркелгісі Алғышарттар бөлімінде көрсетілген талаптарға сәйкес келетіндігін тексеріңіз. Келесі пәрменін таңдаңыз.

   

   Ескерім

   Ортаны деректер көліне байланыстырудың бөлігі ретінде, сіз сақтау тіркелгісіне Azure Synapse Link қызмет қатынасуын бересіз. Azure Data Lake storage тіркелгісін жасаған және конфигурациялаған кезде және өзіңізге сақтау орнының тіркелгі иесі рөлін бергенде алғышарттар орындалғанына көз жеткізіңіз. Сонымен қатар сіз Power Platform деректер ағыны қызметіне сақтау орныңыздың тіркелгісіне қатынасу құқығын бересіз. Қосымша ақпарат: Деректер ағындарымен жеке қызмет деректерін дайындау.

6. Экспорттау керек кестелерді қосып, содан кейін Сақтау түймешігін таңдаңыз. Өзгерісті бақылау қосылған кестелерді ғана экспорттауға болады. Қосымша ақпарат: Өзгерістерді бақылауды қосу.

   

Azure деректер көлін байланыстырылған қызмет ретінде Synapse жұмыс кеңістігіне қосу арқылы бір ортадан Azure жазылымындағы бірнеше Azure Synapse Analytics жұмыс кеңістігі мен Azure деректер көліне сілтеме жасау үшін жоғарыдағы қадамдарды орындауға болады. Сол сияқты бірнеше ортадан барлығы бір қатысушыдағы бір Azure Synapse Analytics жұмыс кеңістігі мен Azure деректер көліне сілтеме жасауға болады.

Ескерім

Azure Synapse Link for Dataverse қызмет Power Platform қадамнан тыс мүмкіндік ретінде үздіксіз біріктірілген. Ол Power Platform деректерді сақтау және басқару үшін орнатылған қауіпсіздік және басқару стандарттарына сәйкес келеді. Қосымша ақпарат: Деректерді сақтау және басқару

Azure Synapse Link қызметі экспорттаған деректер тасымалдау кезінде Transit Layer Security(TLS) 1.2 немесе одан жоғары нұсқасын пайдаланып шифрланады және тыныш күйде Azure Data Lake Storage 2-ші ұрпақта шифрланады. Сонымен қатар blob сақтау орындағы деректер де сақтау орнында шифрланады. Azure Data Lake Storage Gen2 сақтау орнындағы шифрлау деректерді қорғауға, кәсіпорынның қауіпсіздік саясатын жүзеге асыруға және нормативтік сәйкестік талаптарына сәйкестендіруге көмектеседі. Қосымша ақпарат: Azure Data Encryption-rest Қосымша ақпарат: Azure Storage брандмауэрлерін және виртуалды желілерді конфигурациялау

Synapse жұмыс кеңістігіндегі кесте деректерін басқару

Azure Synapse Link бағдарламасын орнатқаннан кейін экспортталған кестелерді екі тәсілдің бірімен басқаруға болады:

• Бір немесе бірнеше қосу немесе жою үшін Power Apps (make.powerapps.com) Azure Synapse Link аймағында пәрмендер жолағында Кестелерді басқару тармағын таңдаңыз. байланыстырылған кестелер.

• Power Apps жасаушы порталының Кестелер аумағында … белгісін таңдаңыз кестенің жанында, содан кейін кесте деректерін экспорттау керек байланысқан деректер көлін таңдаңыз.

  

Azure Synapse Link жүйесін бақылау

Azure Synapse Link жүйесін орнатқаннан кейін Azure Synapse Link жүйесін Кестелер қойыншасынан бақылауға болады.

• Таңдалған Azure Synapse Link жүйесінің бөлігі болып табылатын кестелердің тізімі болады.
• Синхрондау күйінің әртүрлі кезеңдері бар. NotStarted күйі кестенің синхрондауды күтіп тұрғанын көрсетеді. Кестені бастапқы синхрондау Аяқталған болғанда, қосымша жаңартулар орындалмайтын кейінгі өңдеу кезеңі болады. Бұл деректеріңіздің өлшеміне байланысты бірнеше сағатқа созылуы мүмкін. Кезеңдік жаңартулар орын ала бастағанда, соңғы синхрондау күні үнемі жаңартылып отырады.
• Саны бағанында жазылған жолдар саны көрсетіледі. Тек үстеу опциясы Жоқ күйіне орнатылғанда, бұл жазбалардың жалпы саны болады. Тек үстеу опциясы Иә күйіне орнатылғанда, бұл өзгерістердің жалпы саны болады.
• Тек үстеу және Бөлу стратегиясы бағандары әртүрлі кеңейтілген конфигурациялардың қолданысын көрсетеді.

Azure Synapse Link бағдарламасын ажырату

1. Ажырату үшін қажетті Azure Synapse Link жүйесін таңдаңыз.

2. Пәрмендер жолағынан Ажырату опциясын таңдаңыз.

3. Деректер көлінің файлдық жүйесін және Synapse дерекқорын жою үшін растау керек байланыс атауын теріңіз.

4. Иә опциясын таңдаңыз және бәрін ажыратуға және жоюға бірнеше минут беріңіз.

Azure Synapse Link қайта байланыстыру

Егер ажырату кезінде файлдық жүйені жойсаңыз, сол Synapse жұмыс кеңістігі мен деректер көлін қайта байланыстыру үшін жоғарыдағы қадамдарды орындаңыз. Байланысты жою кезінде файлдық жүйені жоймаған болсаңыз, қайта байланыстыру үшін деректерді тазалауыңыз керек:

1. Azure Synapse Analytics жүйесіне өтіңіз.

2. Ажыратылған дерекқор үшін ... белгішесін таңдаңыз және Жаңа жазу кітапшасы > Бос жазу кітапшасы тармағын таңдаңыз.

3. Ашылмалы мәзірден пулды таңдау арқылы жазу кітапшасын Apache Spark пулға тіркеңіз. Егер сізде Apache Spark пул жоқ болса, оны жасау үшін Пулдарды басқару пәрменін таңдаңыз.

4. Келесі сценарийді енгізіңіз, <DATABASE_NAME> өрісін ажырату керек дерекқор атауымен ауыстырыңыз және жазу кітапшасын іске қосыңыз.

    %%sql
    DROP DATABASE <DATABASE_NAME> CASCADE

5. Жазу кітапшасын іске қосқаннан кейін сол жақ тақтадағы дерекқор тізімін жаңартыңыз. Егер дерекқор әлі де бар болса, дерекқорды тінтуірдің оң жақ түймешігімен басып, Жою түймешігін таңдаңыз.

6. Power Apps бағдарламасына өтіп, Synapse жұмыс кеңістігі мен деректер көлін қайта байланыстырыңыз.

Нақты уақытқа жақын деректерге және тек оқуға арналған сурет деректеріне қатынасу

Azure Synapse Link жүйесін жасағаннан кейін, деректерді кез келген уақытта сенімді түрде пайдалануды қамтамасыз ету кесте деректерінің екі нұсқасы Azure жазылымындағы Azure Synapse Analytics және/немесе Azure Data Lake Storage Gen2 тіркелгісінде синхрондалады:

• Жақын нақты уақыттағы деректер: бастапқы шығарылғаннан немесе соңғы синхрондаудан бері қандай деректер өзгергенін анықтау арқылы Dataverse арқылы Azure Synapse Link арқылы синхрондалған деректердің көшірмесін береді.
• Сурет деректері: жүйелі аралықтармен (бұл жағдайда әр саған сайын) жаңартылатын нақты уақытқа жақын деректердің тек оқуға арналған көшірмесін қамтамасыз етеді. 

Ескерім

Тек оқуға арналған сурет деректерін жасау үшін Көшіру операцияларының рұқсат етілген ауқымы параметрінің Кез келген сақтау есептік жазбасынан конфигурацияланғанына көз жеткізіңіз. Қосымша ақпарат: Көшіру әрекеттері үшін рұқсат етілген аумақты конфигурациялаңыз

1. Қажетті Azure Synapse Link бағдарламасын таңдаңыз және содан кейін жоғарғы тақтадан  Azure Synapse Analytics жұмыс кеңістігіне өту  опциясын таңдаңыз.
2. Сол жақ тақтадан Көл дерекқолары опциясын кеңейтіңіз, dataverse-environmentName-organizationUniqueName параметрін таңдаңыз және содан кейін  Кестелер бөлімін кеңейтіңіз.

Барлық Нақты уақытқа жақын деректер кестелері тізімделген және DataverseTableName атау шартымен талдау үшін қолжетімді.Барлық Сурет деректер кестелері тізімделген және DataverseTableName_partitioned атау шартымен талдау үшін қолжетімді.

Келесі не?

Azure Synapse Link for Dataverse қызметін сәтті қолданғаннан кейін, деректерді Анықтау хабы арқылы қалай талдауға және тұтынуға болатындығын анықтаңыз. Анықтау хабына қатынасу үшін Power Apps > Azure Synapse Link тармағына өтіңіз. Байланысты қызметті таңдаңыз, содан кейін Анықтау хабы қойыншасын таңдаңыз. Мұнда сіз деректерден максималды мән алуға көмектесетін ұсынылған құралдарды және арнайы құжаттарды таба аласыз.

Сондай-ақ, келесіні қараңыз

Azure Synapse Link for Dataverse бағдарламасын Azure Data Lake қызметімен конфигурациялау

Azure Synapse Link for Dataverse кеңейтілген конфигурациясы

Azure Synapse Link туралы жиі қойылатын сұрақтар

Екілік нысан: Azure Synapse Link for Dataverse бағдарламасын хабарлау

Ескерім

Сіз құжат тіліңіздің артықшылықтары туралы айта аласыз ба? Қысқа сауалнамаға қатысыңыз. (бұл сауалнама ағылшын тілінде екеніне назар аударыңыз)

Сауалнама шамамен жеті минут уақытыңызды алады. Жеке деректер жиналмайды (құпиялылық туралы мәлімдеме).