Сведения об Azure Kinect DK
Azure Kinect DK — это комплект для разработчиков с расширенными датчиками ИИ, предоставляющими сложные модели компьютерного зрения и речи. Kinect содержит датчик глубины, массив пространственных микрофонов с видеокамерой и датчик ориентации в формате одного небольшого устройства с разными режимами, параметрами и пакетами средств разработки программного обеспечения (SDK). Это решение можно приобрести в интернет-магазине Майкрософт.
Среда разработки Azure Kinect DK состоит из следующих пакетов средств разработки:
- пакет средств разработки для низкоуровневого доступа к датчикам и устройству;
- пакет средств разработки для отслеживания тел в трехмерном пространстве;
- Пакет SDK службы "Распознавание речи Azure" для включения доступа к микрофону и облачных служб распознавания речи Azure.
Кроме того, с RGB-камерой устройства можно использовать службы Cognitive Vision.
Пакет SDK для датчика Azure Kinect
Пакет средств разработки для датчиков Azure Kinect предоставляет низкоуровневый доступ к аппаратным датчикам и конфигурации устройства в Azure Kinect DK.
Дополнительные сведения о пакете средств разработки для датчиков Azure Kinect см. в этой статье.
Возможности пакета средств разработки для датчиков Azure Kinect
В пакете средств разработки для датчиков реализованы следующие возможности, которые становятся доступны после установки и запуска в Azure Kinect DK:
- доступ к камере глубины и управление режимом (пассивный ИК-режим, режимы глубины с широким и узким полем зрения);
- доступ к RGB-камере и управление ее параметрами (например, экспозицией и балансом белого);
- доступ к датчику движения (гироскоп и акселерометр);
- синхронизированная потоковая передача данных с камер RGB и глубины с настраиваемой задержкой между ними;
- управление синхронизацией внешнего устройства с настраиваемой задержкой между устройствами;
- доступ к метаданным кадров камеры (разрешение изображения, метки времени и т. д.);
- доступ к данным калибровки устройства.
Средства пакета SDK для датчиков Azure Kinect
В пакете SDK для датчиков доступны следующие средства:
- средство просмотра для отслеживания потоков данных устройства и настройки режимов;
- средство записи данных с датчиков и API чтения, в которых используется формат контейнера Matroska;
- Средство обновления встроенного ПО Azure Kinect DK.
Пакет SDK Azure Kinect для отслеживания тела
Пакет средств разработки для отслеживания тела включает библиотеку Windows и среду выполнения, которые позволяют отслеживать положение тел в трехмерном пространстве при использовании с оборудованием Azure Kinect.
Возможности отслеживания тела в Azure Kinect
В прилагаемых пакетах средств разработки предоставляются следующие возможности для отслеживания тела:
- сегментация тела;
- анатомически правильный скелет для каждого тела или его части в поле зрения;
- уникальный идентификатор для каждого тела;
- отслеживание перемещений тел во времени.
Средства Azure Kinect для отслеживания тела
- Средство отслеживания тела содержит средство просмотра, которое позволяет контролировать положение тел в трехмерном пространстве.
Пакет SDK службы "Распознавание речи Azure"
Пакет средств разработки для службы "Речь" позволяет поддерживать службы речи, требующие подключения к Azure.
Речевые службы
- Преобразование речи в текст
- Перевод речи
- Преобразование текста в речь
Примечание.
В Azure Kinect DK нет динамиков.
Подробные сведения см. в документации по службе "Речь".
Службы зрения
Следующие службы Azure Cognitive Vision предоставляют в Azure средства для идентификации и анализа содержимого на изображениях и видео.
- Компьютерное зрение
- Распознавание лиц
- Индексатор видео
- Content Moderator
- Пользовательское визуальное распознавание
Службы постоянно развиваются и улучшаются, поэтому не забывайте регулярно проверка для новых или дополнительных служб ИИ Azure для улучшения приложения. Для раннего просмотра новых служб проверка лаборатории служб ИИ Azure.
Требования к оборудованию Azure Kinect
Azure Kinect DK интегрирует новейшие технологии датчиков Майкрософт в единый блок с подключением через USB. Подробнее см. в спецификациях оборудования для Azure Kinect DK.
Следующие шаги
Теперь вы получили общее представление об Azure Kinect DK. Пора приступить к реальным действиям.