Голосовой вводVoice input

Голосовой ввод

Голос — один из основных типов ввода в HoloLens.Voice is one of the key forms of input on HoloLens. Он позволяет напрямую создавать голограммы без использования жестов руки.It allows you to directly command a hologram without having to use hand gestures. Голосовой ввод позволяет естественным способом сообщить о своих намерениях.Voice input can be a natural way to communicate your intent. Речь особенно хорошо работает при обходе сложных интерфейсов, поскольку позволяет пользователям перемещаться по вложенным меню с помощью одной команды.Voice is especially good at traversing complex interfaces, because it lets users cut through nested menus with one command.

Речевой ввод обеспечивается тем же механизмом , который поддерживает распознавание речи во всех универсальных приложениях Windows.Voice input is powered by the same engine that supports speech in all Universal Windows Apps. В HoloLens распознавание речи всегда будет работать на языке интерфейса Windows, настроенном в параметрах устройства.On HoloLens, speech recognition will always function in the Windows display language configured in your device Settings.


Речь и взглядVoice and gaze

Если вы используете речевые команды, то в качестве стандартного механизма нацеливания используется курсор, который является предметом выбора или для передачи команды в приложение, которое вы ищете.When you're using voice commands, head or eye gaze is the typical targeting mechanism, whether with a cursor to "select" or to channel your command to an application you're looking at. Может даже не потребоваться отображение курсора «взгляд» (см. статью «как»).It may not even be required to show any gaze cursor ("see it, say it"). Некоторым голосовым командам не требуется цель, например "перейти на начало" или "Привет, Кортана".Some voice commands don't require a target at all, such as "go to start" or "Hey Cortana."


Поддержка устройствDevice support

ВозможностьFeature HoloLens (1-го поколения)HoloLens (1st gen) HoloLens 2HoloLens 2 Иммерсивные гарнитурыImmersive headsets
Голосовой вводVoice input ✔️✔️ ✔️✔️ ✔️ (с микрофоном)✔️ (with microphone)

Команда "Select"The "select" command

HoloLens (1-го поколения)HoloLens (1st gen)

Даже без специального добавления поддержки голоса в приложение пользователи могут активировать голограммы, просто выполнив команду "Select".Even without specifically adding voice support to your app, your users can activate holograms simply by saying the system voice command "select". Это ведет себя так же, как воздушный вызов в hololens, нажатие кнопки выбрать на кнопке hololensили нажатие триггера на контроллере движения Windows Mixed Reality.This behaves the same as an air tap on HoloLens, pressing the select button on the HoloLens clicker, or pressing the trigger on a Windows Mixed Reality motion controller. Вы услышите звук и увидите подсказку с сообщением "Select" в качестве подтверждения.You'll hear a sound and see a tooltip with "select" appear as confirmation. "Select" включается алгоритмом обнаружения ключевых слов низкого уровня, что означает, что вы можете говорить в любое время с минимальным временем жизни аккумулятора."Select" is enabled by a low-power keyword detection algorithm, which means you can say it anytime with minimal battery life impact. Вы даже можете сказать «SELECT», используя ваши руки.You can even say "select" with your hands at your side.



HoloLens 2HoloLens 2

Чтобы использовать команду "Select" в HoloLens 2, сначала необходимо открыть курсор взгляда, чтобы он использовался в качестве указателя.To use the "select" voice command in HoloLens 2, you first need to bring up the gaze cursor to use as a pointer. Команду для ее упрощения можно запомнить — просто скажите «SELECT».The command to bring it up is easy to remember--just say, "select".

Чтобы выйти из режима, снова используйте руки, нажимая на кнопку с пальцами или используя системный жест.To exit the mode, use your hands again by air tapping, approaching a button with your fingers, or using the system gesture.

Изображение: Скажите "выбрать", чтобы использовать голосовую команду для выбораImage: Say "select" to use the voice command for selection

Пользователь может сказать "выбрать", чтобы использовать голосовую команду для выбора.



"Привет, Кортана!"Hey Cortana

Вы можете сказать "Привет, Кортана!", чтобы открыть Кортану в любое время.You can say "Hey Cortana" to bring up Cortana at any time. Вам не нужно ждать, пока он пойдет, чтобы продолжить задавать вопрос или дать ему инструкцию.You don't have to wait for her to appear to continue asking her your question or giving her an instruction. Например, попробуйте сказать "Привет, Кортана, что такое Погода?".For example, try saying "Hey Cortana, what's the weather?" как одно предложение.as a single sentence. Чтобы получить дополнительные сведения о Кортане и о том, что вы можете сделать, спросите!For more information about Cortana and what you can do, ask her! Скажите: "Привет, Кортана, что можно сказать?"Say "Hey Cortana, what can I say?" и она будет получать список рабочих и рекомендуемых команд.and she'll pull up a list of working and suggested commands. Если вы уже находитесь в приложении Кортаны, выберите ?If you're already in the Cortana app, select the ? значок на боковой панели, чтобы извлечь это же меню.icon on the sidebar to pull up this same menu.

Команды, относящиеся к HoloLensHoloLens-specific commands

  • "Что можно говорить?""What can I say?"
  • "Перейти на запуск"-вместо раскрытия для перехода в меню "Пуск ""Go to Start" - instead of bloom to get to Start Menu
  • "Запуск ""Launch "
  • "Переместить сюда""Move here"
  • "Сделать фотографию""Take a picture"
  • "Начать запись""Start recording"
  • "Закончить запись""Stop recording"
  • "Показывать луч""Show hand ray"
  • "Скрыть руки луча""Hide hand ray"
  • "Увеличить яркость""Increase the brightness"
  • "Уменьшить яркость""Decrease the brightness"
  • "Увеличение объема тома""Increase the volume"
  • "Уменьшить объем тома""Decrease the volume"
  • "Отключить" или "включить звук""Mute" or "Unmute"
  • "Завершение работы устройства""Shut down the device"
  • "Перезапустить устройство""Restart the device"
  • "Переход в спящий режим""Go to sleep"
  • "Что такое время?""What time is it?"
  • «Сколько аккумулятора осталось?»"How much battery do I have left?"


«Видите, скажите»"See It, Say It"

HoloLens имеет модель "видите ИТ-IT" для голосового ввода, где метки на кнопках указывают пользователям, какие голосовые команды также могут говорить.HoloLens has a "see it, say it" model for voice input, where labels on buttons tell users what voice commands they can say as well. Например, при просмотре окна приложения в HoloLens (1-й номер) пользователь может сказать команду "настроить", чтобы настроить расположение приложения в мире.For example, when looking at an app window in HoloLens (1st gen), a user can say "Adjust" command to adjust the position of the app in the world.

Изображение: пользователь может сказать команду "настроить", которая отображается на панели приложений, чтобы настроить расположение приложения.Image: A user can say the "Adjust" command, which they see in the App bar to adjust the position of the app

spacespace
При просмотре окна приложения или голограммы пользователь может сказать команду "настроить", которая отображается на панели приложений, чтобы настроить расположение приложения в миреWhen looking at an app window or hologram, a user can say the "Adjust" command which they see in the App bar to adjust the position of the app in the world


Когда приложения следуют этому правилу, пользователи могут легко понять, что следует сказать для управления системой.When apps follow this rule, users can easily understand what to say to control the system. Хотя облаками на кнопке в HoloLens (1-й), вы увидите всплывающую подсказку "Voice вдаваясь", которая появляется после второй, если кнопка включена с помощью голоса и отображает команду "нажать".While gazing at a button in HoloLens (1st gen), you'll see a "voice dwell" tooltip that comes up after a second if the button is voice-enabled and displays the command to speak to "press" it. Чтобы показать голосовые подсказки в HoloLens 2, отобразите голосовый курсор, указав "Select" или "что можно сказать" (см. изображение).To reveal voice tooltips in HoloLens 2, show the voice cursor by saying "select" or "What can I say" (See image).

Изображение: команды отображаются под кнопками.Image: "See it, say it" commands appear below the buttons

Видите, что команды отображаются под кнопками



Команды Voice для быстрой обработки с голограммамиVoice commands for fast hologram manipulation

Существует множество голосовых команд, которые можно сказать, облаками на голограммах, чтобы быстро выполнять задачи манипуляции.There are many voice commands you can say while gazing at a hologram to quickly do manipulation tasks. Эти команды работают с окнами приложений и трехмерными объектами, помещенными в мир.These voice commands work on app windows and 3D objects you've placed in the world.

Команды обработки голограммHologram manipulation commands

  • Лицом мнеFace me
  • Больше | УлучшениеBigger | Enhance
  • РазмеровSmaller

В HoloLens 2 можно также создавать более естественные взаимодействия в сочетании с глазами-взглядом, который неявно предоставляет контекстные сведения о том, на что вы ссылаетесь.On HoloLens 2, you can also create more natural interactions in combination with eye-gaze, which implicitly provides contextual information about what you are referring to. Например, можно взглянуть на голограмму и сказать, что _это_«поместить», а затем взглянуть на то, где нужно его поместить, и сказать « _сюда_».For example, you could look at a hologram and say "put this" and then look over where you want to place it and say "over here". Вы также можете взглянуть на сложную часть на сложной машине и сказать: "получить дополнительные сведения об этом".Or you could look at a holographic part on a complex machine and say: "give me more information about this".

Обнаружение команд VoiceDiscovering voice commands

Некоторые команды, например команды для быстрой обработки выше, могут быть скрыты.Some commands, like the commands for fast manipulation above, can be hidden. Чтобы узнать, какие команды можно использовать, Взгляните на объект и скажите «что можно сказать?».To learn about what commands you can use, gaze at an object and say, "what can I say?". Откроется список возможных команд.A list of possible commands pops up. Можно также использовать курсор Head, чтобы найти и раскрывать подсказки голоса для каждой кнопки перед вами.You can also use the head gaze cursor to look around and reveal the voice tooltips for each button in front of you.

Если вам нужен полный список, просто скажите «показывать все команды» в любое время.If you want a complete list, just say, "Show all commands" anytime.

ДиктовкаDictation

Вместо ввода с помощью воздушныхнаработок речь может оказаться более эффективной для ввода текста в приложение.Rather than typing with air taps, voice dictation can be more efficient to enter text into an app. Это может значительно ускорить ввод данных с меньшими усилиями для пользователя.This can greatly accelerate input with less effort for the user.

Диктовка речи начинается с нажатия кнопки микрофонаVoice dictation starts by selecting the microphone button
Диктовка речи начинается с нажатия кнопки микрофона на клавиатуреVoice dictation starts by selecting the microphone button on the keyboard

В любой момент, когда найдутся неактивные клавиатура, можно переключиться в режим диктовки вместо ввода.Anytime the holographic keyboard is active, you can switch to dictation mode instead of typing. Чтобы начать работу, выберите микрофон на стороне текстового поля ввода.Select the microphone on the side of the text input box to get started.

Добавление в приложение голосовых командAdding voice commands to your app

Рассмотрите возможность добавления голосовых команд при создании любого взаимодействия.Consider adding voice commands to any experience that you build. Voice — это мощный способ управления системой и приложениями.Voice is a powerful way control the system and apps. Так как пользователи говорят с разными разновидностями диалектов и диакритических знаков, правильное нажатие ключевых слов распознавания речи гарантирует, что команды пользователей будут интерпретироваться неоднозначно.Because users speak with different kinds of dialects and accents, proper choice of speech keywords will make sure your users' commands are interpreted unambiguously.

РекомендацииBest practices

Ниже приведены некоторые рекомендации, которые помогут облегчить распознавание речи.Below are some practices that will aid in smooth speech recognition.

  • Используйте краткие команды. По возможности выбирайте ключевые слова из двух или более слогов.Use concise commands - When possible, choose keywords of two or more syllables. В односложных словах лица с разными акцентами обычно используют разные гласные.One-syllable words tend to use different vowel sounds when spoken by persons of different accents. Пример: "воспроизведение видео" лучше, чем "Воспроизвести текущее выбранное видео"Example: "Play video" is better than "Play the currently selected video"
  • Используйте простой словарь — пример: "показывать Примечание" лучше, чем "Показывать панель"Use simple vocabulary - Example: "Show note" is better than "Show placard"
  • Убедитесь, что команды не являются обратимыми . Убедитесь, что все действия голосовых команд являются необратимыми, и их можно легко отменить в случае, если другой человек говорит о том, что пользователь случайно запускает команду.Make sure commands are non-destructive - Make sure any speech command actions are non-destructive and can easily be undone in case another person speaking near the user accidentally triggers a command.
  • Избегайте аналогичных команд звука — Избегайте регистрации нескольких голосовых команд, которые похожи на похожие.Avoid similar sounding commands - Avoid registering multiple speech commands that sound similar. Пример: "другие" и "показывать магазин" могут быть похожи на звук.Example: "Show more" and "Show store" can be similar sounding.
  • Отмените регистрацию приложения, если оно не используется . Если ваше приложение находится не в состоянии, в котором определена допустимая Голосовая команда, рассмотрите возможность отмены регистрации, чтобы другие команды не перепутаться.Unregister your app when not it uses - When your app isn't in a state in which a particular speech command is valid, consider unregistering it so that other commands aren't confused for that one.
  • Протестируйте с разными акцентами. Протестируйте приложение с пользователями с разными акцентами.Test with different accents - Test your app with users of different accents.
  • Обеспечьте согласованность голосовых команд. Если команда "Назад" переводит на предыдущую страницу, поддерживайте это поведение в своих приложениях.Maintain voice command consistency - If "Go back" goes to the previous page, maintain this behavior in your applications.
  • Избегайте использования системных команд — следующие команды зарезервированы для системы, поэтому не используйте их в приложениях:Avoid using system commands - The following voice commands are reserved for the system, so avoid using them in your applications:
    • "Привет, Кортана!"."Hey Cortana"
    • "Выбрать""Select"
    • "Перейти к запуску""Go to start"

Преимущества речевого вводаAdvantages of voice input

Голосовой ввод — это естественный способ сообщить о наших намерениях.Voice input is a natural way to communicate our intents. Речь особенно хороша при обходе интерфейса, поскольку она может помочь пользователям в устранении нескольких шагов интерфейса.Voice is especially good at interface traversals because it can help users cut through multiple steps of an interface. Пользователь может сказать "вернуться назад" при просмотре веб-страницы вместо того, чтобы приступать к работе и нажать кнопку "назад" в приложении.A user might say "go back" while looking at a webpage, instead of having to go up and hit the back button in the app. Это небольшое время сохранения имеет мощный эмоциональномный результат на восприятии пользователя и дает им небольшой объем суперсовременные.This small time saving has a powerful emotional effect on user’s perception of the experience and gives them a small amount superpower. Использование голосовой связи — это также удобный метод ввода, когда наши руки заняты или когда нам предстоит выполнить несколько заданий.Using voice is also a convenient input method when we have our arms full or are multi-tasking. На устройствах, где ввод с клавиатуры является сложной возможностью, Диктовка голоса может быть эффективным альтернативным способом ввода текста.On devices where typing on a keyboard is difficult, voice dictation can be an efficient alternative way to input text. Наконец, в некоторых случаях, когда диапазон точности для взгляда и жеста ограничен, Voice может помочь в неоднозначности намерений пользователя.Lastly, in some cases when the range of accuracy for gaze and gesture are limited, voice can help to disambiguate the user's intent.

Преимущества использования голоса для пользователяHow using voice can benefit the user

  • Экономия времени — конечная цель достигается намного эффективнее.Reduces time - it should make the end goal more efficient.
  • Сокращение усилий — задания выполняются намного быстрее и не требуют значительных усилий.Minimizes effort - it should make tasks more fluid and effortless.
  • Облегчение восприятия информации — это интуитивно понятно, легко выучить и запомнить.Reduces cognitive load - it's intuitive, easy to learn, and remember.
  • Это основе социотехники приемлемое — оно должно попадать в соответствие с социальную нормами поведения.It's socially acceptable - it should fit in with societal norms of behavior.
  • Это установившаяся практика — использование голосовой связи легко может стать привычным поведением.It's routine - voice can readily become a habitual behavior.

Проблемы с голосовым вводомChallenges for voice input

Хотя речевой ввод отлично подходит для многих разных приложений, он также сталкивается с несколькими проблемами.While voice input is great for many different applications, it also faces several challenges. Понимание преимуществ и трудностей, связанных с голосовыми вводами, позволяет разработчикам приложений более разумно выбирать способ и время использования речевого ввода и создавать превосходные возможности для пользователей.Understanding both the advantages and challenges for voice input enables app developers to make smarter choices for how and when to use voice input and to create a great experience for their users.

Речевой ввод для непрерывного элемента управления вводом Один из них является детализированным элементом управления.Voice input for continuous input control Fine-grained control is one of them. Например, пользователю может потребоваться изменить свой том в своем музыкальном приложении.For example, a user might want to change their volume in their music app. Она может сказать «громче», но не ясно, сколько громкости система должна сделать тому.She can say "louder", but it's not clear how much louder the system is supposed to make the volume. Пользователь может сказать: «сделайте его немного громче», но «немного» — трудность.The user could say: "Make it a little louder", but "a little" is difficult to quantify. Перемещение и масштабирование голограмм с помощью голоса также усложняется.Moving or scaling holograms with voice is similarly difficult.

Надежность распознавания речевого ввода Хотя системы ввода голоса становятся лучше и эффективнее, иногда они могут неправильно слышать и интерпретировать голосовую команду.Reliability of voice input detection While voice input systems become better and better, sometimes they may incorrectly hear and interpret a voice command. Ключом является устранение проблемы в приложении.The key is to address the challenge in your application. Отправляйте свои отзывы пользователям, когда система прослушивается и что понимается системой, что позволяет понять потенциальные проблемы, связанные с распознаванием речи пользователей.Provide feedback to your users when the system is listening and what the system understood clarifies potential issues understanding the users' speech.

Ввод голоса в общих пространствах Возможно, голоса не основе социотехники в сферах, к которым вы предоставляете доступ другим пользователям.Voice input in shared spaces Voice may not be socially acceptable in spaces that you share with others. Вот несколько примеров:Here are a few examples:

  • Пользователь может не захотеть беспокоить других пользователей (например, в тихой библиотеке или в общем офисе).The user may not want to disturb others (for example, in a quiet library or shared office)
  • Пользователи могут видеть, что речь идет о себе в общедоступной,Users may feel awkward being seen talking to themselves in public,
  • Пользователь может неудобно диктовать личное или конфиденциальное сообщение (включая пароли), пока другие прослушиваютA user may feel uncomfortable dictating a personal or confidential message (including passwords) while others are listening

Голосовое ввод уникальных или неизвестных слов Проблемы, возникающие при вводе голоса, также поступают, когда пользователи определяют слова, которые могут быть неизвестны для системы, например псевдонимы, определенные сленговых выражений слова или аббревиатуры.Voice input of unique or unknown words Difficulties for voice input also come when users are dictating words that may be unknown to the system, such as nicknames, certain slang words, or abbreviations.

Обучение голосовым командам Хотя конечная цель заключается в естественном противоречии системе, часто приложения по-прежнему используют определенные предварительно определенные команды.Learning voice commands While the ultimate goal is to naturally converse with your system, often apps still rely on specific pre-defined voice commands. Задача, связанная с значительным набором голосовых команд, заключается в том, как научиться выполнять их без перегрузки пользователя и как помочь пользователю в их использовании.A challenge associated with a significant set of voice commands is how to teach them without overloading the user and how to help the user to keep them.



Состояния обратной связи голосовых командVoice feedback states

При правильном применении голосовых команд пользователь понимает, что он может сказать, и получает обратную связь о том, что система услышала его правильно.When Voice is applied properly, the user understands what they can say and get clear feedback the system heard them correctly. Эти два сигнала придают пользователю уверенность в правильности выбора голосовых команд в качестве основного метода ввода.These two signals make the user feel confident in using Voice as a primary input. Ниже приведена схема, показывающая, что происходит с курсором после распознавания голосовой команды и как он сообщает это пользователю.Below is a diagram showing what happens to the cursor when voice input is recognized and how it communicates that to the user.

1. состояние обычного курсора1. Regular cursor state
1. состояние обычного курсора1. Regular cursor state

2. сообщает о голосовом отзыве, а затем исчезает2. Communicates voice feedback and then disappears
2. сообщает о голосовом отзыве, а затем исчезает2. Communicates voice feedback and then disappears

3-5.*3. Состояние обычного курсораRegular cursor state
3. возвращается к обычному состоянию курсора3. Returns to regular cursor state




Главное, что пользователю следует знать о "речи" в смешанной реальностиTop things users should know about "speech" in mixed reality

  • Скажите «SELECT» при нацеливании на кнопку (это можно использовать в любом месте для выбора кнопки).Say "Select" while targeting a button (you can use this anywhere to select a button).
  • Вы можете произнести имя метки кнопки панели приложения в некоторых приложениях, чтобы выполнить действие.You can say the label name of an app bar button in some apps to take an action. Например, при просмотре приложения пользователь может сказать команду "Удалить", чтобы удалить приложение из мира (это экономит время от необходимости выбора его вручную).For example, while looking at an app, a user can say the command "Remove" to remove the app from the world (this saves time from having to select it with your hand).
  • Вы можете начать прослушивание Кортаны, выполнив слово "Привет, Кортана!".You can start Cortana listening by saying "Hey Cortana." Вы можете задавать ей вопросы ("Привет, Кортана, какая высота Эйфелевой башни"), попросить ее открыть приложение ("Привет, Кортана, открой Netflix") или попросить ее открыть меню "Пуск" ("Привет, Кортана, открой домашнюю страницу") и многое другое.You can ask her questions ("Hey Cortana, how tall is the Eiffel tower"), tell her to open an app ("Hey Cortana, open Netflix"), or tell her to bring up the Start Menu ("Hey Cortana, take me home") and more.

Распространенные вопросы пользователей о голосовых командахCommon questions and concerns users have about voice

  • Что я могу сказать?What can I say?
  • Как узнать, что система услышала меня правильно?How do I know the system heard me correctly?
    • Система продолжает неправильно интерпретировать мои голосовые команды.The system keeps getting my voice commands wrong.
    • Она не реагирует, когда я даю ей голосовые команды.It doesn’t react when I give it a voice command.
  • Она неправильно реагирует, когда я даю ей голосовые команды.It reacts the wrong way when I give it a voice command.
  • Как нацеливать голос на конкретное приложение или команду приложения?How do I target my voice to a specific app or app command?
  • Можно ли использовать голос для различных команд в голографическом кадре в HoloLens?Can I use voice to command things out the holographic frame on HoloLens?

СвязьCommunication

Для приложений, которые хотят воспользоваться преимуществами настраиваемых параметров обработки ввода звука, предоставляемых HoloLens, важно понимать различные категории звуковых потоков , которые может использовать приложение.For applications that want to take advantage of the customized audio input processing options provided by HoloLens, it's important to understand the various audio stream categories your app can consume. Windows 10 поддерживает несколько различных категорий потоков, и HoloLens использует три из них для оптимизации качества звука микрофона, предназначенных для речи, обмена данными и других, которые могут использоваться для воспроизведения звука в окружающей среде (то есть «видеокамер»).Windows 10 supports several different stream categories and HoloLens makes use of three of these to enable custom processing to optimize the microphone audio quality tailored for speech, communication, and other, which can be used for ambient environment audio capture (that is, "camcorder") scenarios.

  • Категория AudioCategory_Communications Stream настроена для сценариев качества вызова и речевого сопровождения и предоставляет клиенту 24-разрядный моно поток на входе пользователя в 16-кГц.The AudioCategory_Communications stream category is customized for call quality and narration scenarios and provides the client with a 16-kHz 24-bit mono audio stream of the user's voice
  • Категория AudioCategory_Speechного потока настроена для обработчика речи HoloLens (Windows) и предоставляет его 24-битный моно поток от голоса пользователя.The AudioCategory_Speech stream category is customized for the HoloLens (Windows) speech engine and provides it with a 16-kHz 24-bit mono stream of the user's voice. При необходимости эта категория может использоваться сторонними обработчиками речи.This category can be used by third-party speech engines if needed.
  • Категория AudioCategory_Other Stream настраивается для записи звука в окружающей среде и предоставляет клиенту 24-разрядный стереофонический аудиопоток 48 кГц.The AudioCategory_Other stream category is customized for ambient environment audio recording and provides the client with a 48-kHz 24-bit stereo audio stream.

Вся эта обработка аудио аппаратного ускорения означает, что функции заменяют гораздо меньше энергии, чем при выполнении такой же обработки на ЦП HoloLens.All this audio processing is hardware accelerated which means the features drain a lot less power than if the same processing was done on the HoloLens CPU. Избегайте выполнения других системных входных данных на ЦП, чтобы максимально увеличить время работы батареи системы и воспользоваться преимуществами встроенной, развернутой обработки звукового ввода.Avoid running other audio input processing on the CPU to maximize system battery life and take advantage of the built-in, offloaded audio input processing.

ЯзыкиLanguages

HoloLens 2 поддерживает несколько языков.HoloLens 2 supports multiple languages. Помните, что речевые команды всегда будут выполняться в языке интерфейса системы, даже если установлено несколько клавиатур или если приложения пытаются создать распознаватель речи на другом языке.Keep in mind that speech commands will always run in the system's display language even if multiple keyboards are installed or if apps attempt to create a speech recognizer in a different language.

Устранение неполадокTroubleshooting

Если у вас возникли проблемы с помощью команды "выбрать" и "Привет, Кортана", попробуйте переместиться в скрытое место, отключив его от источника шума или нажимая звук.If you're having any issues using "select" and "Hey Cortana", try moving to a quieter space, turning away from the source of noise, or by speaking louder. В настоящее время все распознавание речи в HoloLens настраивается и оптимизируется специально для собственных докладчиков США английского.At this time, all speech recognition on HoloLens is tuned and optimized specifically to native speakers of United States English.

В выпуске Windows Mixed Reality для выпуска 2017 логика управления конечными точками звука будет работать нормально (бессрочно) после выхода и возврата на Рабочий стол компьютера после первоначального подключения ХМД.For the Windows Mixed Reality Developer Edition release 2017, the audio endpoint management logic will work fine (forever) after logging out and back in to the PC desktop after the initial HMD connection. Перед первым выходом и входом в систему после ВМР OOBE пользователь может столкнуться с различными функциями аудио, начиная с отсутствия звука, в зависимости от того, как система была настроена перед первым подключением к ХМД.Before that first sign out/in event after going through WMR OOBE, the user could experience various audio functionality issues ranging from no audio to no audio switching depending on how the system was set up before connecting the HMD for the first time.



Ввод голоса в МРТК (набор средств для смешанной реальности) для UnityVoice input in MRTK (Mixed Reality Toolkit) for Unity

С помощью мртк можно легко назначить голосовые команды для любых объектов.With MRTK, you can easily assign voice command on any objects. Используйте профиль ввода речи мртк для определения ключевых слов.Use MRTK's Speech Input Profile to define your keywords. Назначая сценарий спичинпусандлер , можно сделать так, чтобы любой объект отвечал на ключевые слова, определенные в профиле речевого ввода.By assigning SpeechInputHandler script, you can make any object respond to the keywords defined in the Speech Input Profile. Спичинпусандлер также предоставляет метку подтверждения речи для улучшения достоверности пользователя.SpeechInputHandler also provides speech confirmation label to improve the user's confidence.


См. также разделSee also