Csatlakozás qlikreplikához

  • Cikk

Fontos

Ez a funkció a nyilvános előzetes verzióban érhető el.

A Qlik Replikálás segítségével több adatforrásból (Oracle, Microsoft SQL Server, SAP, nagyszámítógép stb.) származó adatokat is lekérhet a Delta Lake-be. A Replikálás automatikus módosítási adatrögzítésével (CDC) elkerülheti az adatok manuális kinyerésének, az API-szkriptek használatával történő átvitelnek, a darabolásnak, az előkészítésnek és az importálásnak a nehéz feloldását. A Qlik Compose automatizálja a CDC-t a Delta Lake-be.

Feljegyzés

A Qlik Senseről, a Delta Lake-ben az adatok elemzését segítő megoldásról a Qlik Sense Csatlakozás olvashat.

A Qlik Replikálás általános bemutatóját az alábbi YouTube-videóban tekintheti meg (14 perc).

A Qlik Replikálás szolgáltatással végzett adatfolyamok bemutatásához tekintse meg az alábbi YouTube-videót (6 perc).

A Qlik Replikálás azure Databricks szolgáltatással való használatának lépései az alábbiak.

1. lépés: Databricks személyes hozzáférési jogkivonat létrehozása

A Qlik Replikálás azure Databricks-hitelesítést használ egy Azure Databricks személyes hozzáférési jogkivonat használatával.

Feljegyzés

Ajánlott biztonsági eljárásként, ha automatizált eszközökkel, rendszerekkel, szkriptekkel és alkalmazásokkal hitelesít, a Databricks azt javasolja, hogy munkaterület-felhasználók helyett a szolgáltatásnevekhez tartozó személyes hozzáférési jogkivonatokat használja. A szolgáltatásnevek jogkivonatainak létrehozásáról a szolgáltatásnév jogkivonatainak kezelése című témakörben olvashat.

2. lépés: Fürt beállítása az integrációs igények támogatására

A Qlik Replikálás adatokat fog írni egy Azure Data Lake Storage-elérési útra, és az Azure Databricks integrációs fürt ebből a helyről fogja beolvasni az adatokat. Az integrációs fürt ezért biztonságos hozzáférést igényel az Azure Data Lake Storage elérési úthoz.

Biztonságos hozzáférés egy Azure Data Lake Storage-elérési úthoz

Az Azure Data Lake Storage (ADLS) adataihoz való hozzáférés biztonságossá tételéhez használhatja az Azure Storage-fiók hozzáférési kulcsát (ajánlott) vagy a Microsoft Entra ID szolgáltatásnevet.

Azure Storage-fiók hozzáférési kulcsának használata

A Spark-konfiguráció részeként konfigurálhat egy tárfiók hozzáférési kulcsát az integrációs fürtön. Győződjön meg arról, hogy a tárfiók rendelkezik hozzáféréssel az előkészítéshez használt ADLS-tárolóhoz és fájlrendszerhez, valamint ahhoz az ADLS-tárolóhoz és fájlrendszerhez, ahol a Delta Lake-táblákat meg szeretné írni. Az integrációs fürt kulcs használatára való konfigurálásához kövesse a Csatlakozás lépéseit az Azure Data Lake Storage Gen2 és a Blob Storage felé.

Microsoft Entra ID szolgáltatásnév használata

A Spark-konfiguráció részeként konfigurálhat egy szolgáltatásnevet az Azure Databricks integrációs fürtön. Győződjön meg arról, hogy a szolgáltatásnév hozzáfér az előkészítéshez használt ADLS-tárolóhoz és ahhoz az ADLS-tárolóhoz, ahová a Delta-táblákat meg szeretné írni. Az integrációs fürt szolgáltatásnév használatára való konfigurálásához kövesse az Access ADLS Gen2 szolgáltatásnévvel kapcsolatos lépéseit.

A fürtkonfiguráció megadása

  1. Fürtmód beállítása Standard értékre.

  2. Állítsa a Databricks runtime verziót Databricks-futtatókörnyezeti verzióra.

  3. Az optimalizált írás és az automatikus tömörítés engedélyezéséhez adja hozzá a következő tulajdonságokat a Spark-konfigurációhoz:

    spark.databricks.delta.optimizeWrite.enabled true
spark.databricks.delta.autoCompact.enabled true

  4. Konfigurálja a fürtöt az integrációs és skálázási igényeknek megfelelően.

A fürtkonfiguráció részleteiért lásd : Számítási konfigurációs referencia.

A JDBC URL-címének és HTTP-elérési útjának beszerzéséhez szükséges lépésekért tekintse meg az Azure Databricks számítási erőforrás kapcsolati adatainak lekérését.

3. lépés: JDBC- és ODBC-kapcsolatadatok beszerzése a fürthöz való csatlakozáshoz

Az Azure Databricks-fürt és a Qlik-replikálás összekapcsolásához a következő JDBC/ODBC kapcsolati tulajdonságokra van szükség:

  • JDBC URL-címe
  • HTTP elérési útja

4. lépés: A Qlik-replikálás konfigurálása az Azure Databricks használatával

Lépjen a Qlik bejelentkezési oldalára, és kövesse az utasításokat.

További erőforrások

Támogatás