Zarządzanie aplikacją asystenta Azure Percept głosowego

W tym artykule opisano sposób konfigurowania słowa kluczowego i poleceń aplikacji asystenta głosowego w Azure Percept Studio. Aby uzyskać wskazówki dotyczące konfigurowania słowa kluczowego w IoT Hub portalu, zobacz ten artykuł z wskazówkami.

Jeśli jeszcze nie utworzono aplikacji asystenta głosowego, zobacz Build a no-code voice assistant with Azure Percept Studio and Azure Percept Audio(Tworzenie asystenta głosowego bez kodu przy użyciu Azure Percept Studio i Azure Percept Audio).

Konfiguracja słów kluczowych

Słowo kluczowe to słowo lub krótka fraza używana do aktywowania asystenta głosowego. Na przykład "Hey Cortana" to słowo kluczowe Cortana asystenta. Aktywacja za pomocą głosu umożliwia użytkownikom rozpoczęcie interakcji z produktem bez rąk przez wypowiadanie słowa kluczowego . Ponieważ produkt stale nasłuchuje słowa kluczowego , cały dźwięk jest przetwarzany lokalnie na urządzeniu do momentu wykrycia, aby zapewnić, że dane użytkownika pozostają tak prywatne, jak to możliwe.

Konfiguracja w oknie pokazu asystenta głosowego

  1. Wybierz pozycję Zmień obok Niestandardowe słowo kluczowe na stronie pokazu.

    Screenshot of hospitality demo window.

    Jeśli nie masz otwartej strony pokazu, przejdź do strony urządzenia (zobacz poniżej) i wybierz pozycję Testuj asystenta głosowego w obszarze Akcje, aby uzyskać dostęp do pokazu.

  2. Wybierz jeden z dostępnych słów kluczowych i wybierz pozycję Zapisz, aby zastosować zmiany.

  3. Trzy diody LED na urządzeniu Azure Percept Audio zmienią się na jasnoniebieski (bez migania), gdy konfiguracja zostanie ukończona, a asystent głosowy będzie gotowy do użycia.

Konfiguracja na stronie urządzenia

  1. Na stronie przeglądu witryny Azure Percept Studiowybierz pozycję Urządzenia w okienku menu po lewej stronie.

    Screenshot of Azure Percept Studio overview page with Devices highlighted.

  2. Wybierz urządzenie, na którym wdrożono aplikację asystenta głosowego.

  3. Otwórz kartę Mowa.

    Screenshot of the edge device page with the Speech tab highlighted.

  4. Wybierz pozycję Zmień obok opcji Słowo kluczowe.

    Screenshot of the available speech solution actions.

  5. Wybierz jeden z dostępnych słów kluczowych i wybierz pozycję Zapisz, aby zastosować zmiany.

  6. Trzy diody LED na urządzeniu Azure Percept Audio zmienią się na jasnoniebieski (bez migania), gdy konfiguracja zostanie ukończona, a asystent głosowy będzie gotowy do użycia.

Tworzenie niestandardowego słowa kluczowego

Za Speech Studiomożna utworzyć niestandardowe słowo kluczowe dla asystenta głosowego. Trenowanie podstawowego modelu niestandardowych słów kluczowych trwa do 30 minut.

Postępuj zgodnie z Speech Studio, aby uzyskać wskazówki dotyczące tworzenia niestandardowego słowa kluczowego. Po skonfigurowaniu nowe słowo kluczowe będzie dostępne w portalu Project Do użytku z aplikacją asystenta głosowego.

Konfiguracja poleceń

Polecenia niestandardowe ułatwiają tworzenie rozbudowanych aplikacji do poleceń głosowych zoptymalizowanych pod kątem interakcji z pierwszym głosem. Polecenia niestandardowe najlepiej nadają się do realizacji zadań lub scenariuszy poleceń i kontroli.

Konfiguracja w oknie pokazu asystenta głosowego

  1. Wybierz pozycję Zmień obok opcji Polecenie niestandardowe na stronie pokazu. Jeśli nie masz otwartej strony pokazu, przejdź do strony urządzenia (zobacz poniżej) i wybierz pozycję Testuj asystenta głosowego w obszarze Akcje, aby uzyskać dostęp do pokazu.

  2. Wybierz jedno z dostępnych poleceń niestandardowych i wybierz pozycję Zapisz, aby zastosować zmiany.

Konfiguracja na stronie urządzenia

  1. Na stronie przeglądu witryny Azure Percept Studiowybierz pozycję Urządzenia w okienku menu po lewej stronie.

  2. Wybierz urządzenie, na którym wdrożono aplikację asystenta głosowego.

  3. Otwórz kartę Mowa.

  4. Wybierz pozycję Zmień obok polecenia .

  5. Wybierz jedno z dostępnych poleceń niestandardowych i wybierz pozycję Zapisz, aby zastosować zmiany.

Tworzenie poleceń niestandardowych

Za Speech Studiopolecenia można tworzyć polecenia niestandardowe do wykonania przez asystenta głosowego.

Postępuj zgodnie z Speech Studio, aby uzyskać wskazówki dotyczące tworzenia poleceń niestandardowych. Po skonfigurowaniu nowe polecenia będą dostępne w Azure Percept Studio do użycia z aplikacją asystenta głosowego.

Następne kroki

Po s zbudowaniu aplikacji asystenta głosowego spróbuj obudować rozwiązanie do niechętnych kodom obrazów za pomocą Azure Percept DK.