Rastrear pessoas observadas em um vídeo

Importante

Devido ao anúncio da desativação dos Serviços de Mídia do Azure, o Indexador de Vídeo de IA do Azure anuncia ajustes de recursos do Indexador de Vídeo de IA do Azure. Consulte Alterações relacionadas à desativação do AMS (Serviço de Mídia do Azure) para entender o que isso significa para sua conta do Indexador de Vídeo de IA do Azure. Consulte o Guia de atualização e migração Preparando para a aposentadoria do AMS: VI.

O Indexador de Vídeo de IA do Azure detecta pessoas observadas em vídeos e fornece informações como a localização da pessoa no quadro de vídeo e o carimbo de data/hora exato (início, fim) quando uma pessoa aparece. A API retorna as coordenadas da caixa delimitadora (em pixels) para cada instância de pessoa detectada, incluindo a confiança de detecção.

Alguns cenários em que esse recurso pode ser útil:

• Análise pós-evento – detectar e acompanhar a movimentação de uma pessoa para analisar melhor um acidente ou um evento pós-crime (por exemplo, explosão, roubo bancário, incidente).
• Aprimorar a eficiência ao criar dados brutos para criadores de conteúdo, como anúncios de vídeo, notícias ou jogos de esportes (por exemplo, encontrar pessoas usando uma camiseta vermelha em um arquivo de vídeo).
• Criar um resumo de um vídeo longo, como uma prova judicial da aparição de uma pessoa específica em um vídeo, usando a ID da mesma pessoa detectada.
• Aprender e analisar tendências ao longo do tempo, por exemplo, como os clientes se movem pelos corredores de um shopping ou quanto tempo passam nas filas do caixa.

Por exemplo, se um vídeo contém uma pessoa, a operação de detecção listará as aparições da pessoa junto com as coordenadas nos quadros do vídeo. Você pode usar essa funcionalidade para determinar o caminho da pessoa em um vídeo. Ela também permite determinar se há várias instâncias da mesma pessoa em um vídeo.

O recurso de rastreamento de pessoas observadas recém-adicionado está disponível ao indexar seu arquivo escolhendo a opção Avançado ->Vídeo avançado ou Predefinição avançada de vídeo + áudio (em Indexação de vídeo + áudio). A indexação padrão não incluirá esse novo modelo avançado.

Quando você optar por ver Insights do seu vídeo no site do Video Indexer , o Rastreamento de Pessoas Observadas aparecerá na página com todas as miniaturas de pessoas detectadas. Você pode escolher a miniatura de uma pessoa e ver onde essa pessoa aparece no player de vídeo.

A resposta JSON a seguir ilustra o que o Video Indexer retorna ao rastrear pessoas observadas:

    {
    ...
    "videos": [
        {
            ...
            "insights": {
                ...
                "observedPeople": [{
                    "id": 1,
                    "thumbnailId": "560f2cfb-90d0-4d6d-93cb-72bd1388e19d",
                    "instances": [
                        {
                            "adjustedStart": "0:00:01.5682333",
                            "adjustedEnd": "0:00:02.7027",
                            "start": "0:00:01.5682333",
                            "end": "0:00:02.7027"
                        }
                    ]
                },
                {
                    "id": 2,
                    "thumbnailId": "9c97ae13-558c-446b-9989-21ac27439da0",
                    "instances": [
                        {
                            "adjustedStart": "0:00:16.7167",
                            "adjustedEnd": "0:00:18.018",
                            "start": "0:00:16.7167",
                            "end": "0:00:18.018"
                        }
                    ]
                },]
            }
            ...
            }
    ]
}

Limitações e suposições

Para obter mais informações, consulte Considerações e limitações ao escolher um caso de uso.