Jak služba Personalizace funguje

  • Článek
  • 2 min ke čtení

Prostředek Personalizátor, vaše smyčka učení, používá strojové učení k vytvoření modelu, který předpovídá hlavní akci pro váš obsah. Model se trénuje výhradně na datech, která jste do něj odeslali pomocí volání Rank a Reward. Každá smyčka je na sobě zcela nezávislá.

Rozhraní Rank API a Reward API mají na model vliv.

Akce s funkcemi a kontextové funkce posíláte do rozhraní API Pořadí. Rozhraní API pořadí se rozhodne použít:

  • Exploit (Zneužití): Aktuální model, který rozhoduje o nejlepší akci na základě minulých dat.
  • Prozkoumat: Místo hlavní akce vyberte jinou akci. Toto procento nakonfigurujete pro prostředek Služby personalizátoru v Azure Portal.

Určíte skóre odměny a toto skóre odešlete do rozhraní Reward API. Rozhraní Reward API:

  • Shromažďuje data pro trénování modelu tím, že zaznamenává funkce a skóre odměn každého volání pořadí.
  • Tato data použije k aktualizaci modelu na základě konfigurace zadané v Učení Policy.

Váš systém volá Personalizér

Následující obrázek znázorňuje tok architektury volání volání Rank a Reward:

alternativní text

  1. Akce s funkcemi a kontextové funkce posíláte do rozhraní API Pořadí.

    • Personalizátor se rozhodne, jestli využijete aktuální model, nebo prozkoumáte nové volby modelu.
    • Výsledek hodnocení se odesílá na EventHub.

  2. Nejvyšší pořadí se vrátí do vašeho systému jako ID akce odměny. Váš systém tento obsah prezentuje a určuje skóre odměny na základě vlastních obchodních pravidel.

  3. Váš systém vrátí do smyčky učení skóre odměn.

    • Když personalizátor obdrží odměnu, odměna se posílá na EventHub.
    • Pořadí a odměna korelují.
    • Model AI se aktualizuje na základě výsledků korelace.
    • Modul odvozování se aktualizuje o nový model.

Personalizér přetrénuje model

Personalizační metoda model znovu natrénuje na základě nastavení aktualizace četnosti modelu u prostředku personalizátoru v Azure Portal.

Personalizátor používá všechna aktuálně uchována data na základě nastavení Uchovávání dat v počtu dnů u vašeho prostředku Služby personalizátoru v Azure Portal.

Výzkum v oblasti personalizéru

Personalizační služba je založená na nejmodernější vědě a výzkumu v oblasti zpětná Učení včetně dokumentů, výzkumných aktivit a probíhajících oblastí průzkumu v Microsoft Research.

Další kroky

Další informace o nejčteních scénářích pro Personalizér