Activer l’insight de personne correspondante

Important

En raison de l’annonce de mise hors service d’Azure Media Services, Azure AI Video Indexer annonce les ajustements des fonctionnalités d’Azure AI Video Indexer. Consultez les modifications relatives à la mise hors service Azure Media Service (AMS) pour comprendre ce que cela signifie pour votre compte Azure AI Video Indexer. Consultez le guide de préparation de la mise hors service AMS : Mise à jour et migration vi.

Remarque

L’accès aux fonctionnalités d’identification faciale, de personnalisation et de reconnaissance de la notoriété est limité en fonction des critères d’éligibilité et d’utilisation afin de prendre en charge nos principes d’IA responsable. Les fonctionnalités d’identification faciale, de personnalisation et de reconnaissance de la notoriété ne sont disponibles que pour les clients et partenaires managés par Microsoft. Utilisez le Formulaire d’admission de la reconnaissance faciale pour demander l’accès.

Azure AI Video Indexer correspond aux personnes détectées dans la vidéo avec les visages correspondants (« Personnes » insight). Pour produire l’algorithme correspondant, les rectangles englobants pour les visages et les personnes observées sont affectés de manière spatiale sur la vidéo. L’API retourne le niveau de confiance de chaque correspondance.

Voici quelques scénarios qui tirent parti de cette fonctionnalité :

• Améliorez l’efficacité lors de la création de données brutes pour des créateurs de contenu, comme la publicité par vidéo, des actualités ou des rencontres sportives (par exemple, rechercher toutes les apparences d’une personne spécifique dans une archive vidéo).
• Analyse post-événement : détectez et suivez l’action d’une personne spécifique pour mieux analyser un événement postérieur à un accident ou un crime (par exemple, une explosion, un cambriolage de banque, un incident).
• Créez un résumé à partir d’une longue vidéo, pour inclure les parties où la personne spécifique apparaît.

La fonctionnalité Personne correspondante est disponible lors de l’indexation de votre fichier en choisissant la présélection Avancé ->Indexation vidéo + audio.

Remarque

L’indexation standard n’inclut pas ce modèle avancé.

Pour afficher la personne mise en correspondance sur le site web d’Azure AI Video Indexer, accédez à Afficher ->Afficher Recommandations -> sélectionnez l’option All ou View -Custom View ->Custom View ->Mappé visages.

Lorsque vous choisissez d’afficher des insights sur votre vidéo sur le site web Azure AI Video Indexer, la personne correspondante peut être consultée à partir de l’insight de suivi Personnes observé. Quand vous choisissez une miniature d’une personne, la personne correspondante devient disponible.

Si vous souhaitez afficher les vêtements de personnes détectés dans la chronologie de votre vidéo sur le site web Video Indexer, accédez à Afficher ->Afficher les insights et sélectionnez l’option Tout ou Afficher ->Vue personnalisée ->Personnes observées.

La recherche d’une personne spécifique par nom, renvoyant toutes les apparences de la personne spécifique est activée à l’aide de la barre de recherche de l’Recommandations de votre vidéo sur Azure AI Video Indexer.

Exemple de code JSON

La réponse JSON suivante illustre ce qu’Azure AI Video Indexer retourne lors du suivi des personnes observées ayant mappé une personne associée :

"observedPeople": [
    {
        "id": 1,
        "thumbnailId": "d09ad62e-e0a4-42e5-8ca9-9a640c686596",
        "clothing": [
            {
                "id": 1,
                "type": "sleeve",
                "properties": {
                    "length": "short"
                }
            },
            {
                "id": 2,
                "type": "pants",
                "properties": {
                    "length": "short"
                }
            }
        ],
        "matchingFace": {
            "id": 1310,
            "confidence": 0.3819
        },
        "instances": [
            {
                "adjustedStart": "0:00:34.8681666",
                "adjustedEnd": "0:00:36.0026333",
                "start": "0:00:34.8681666",
                "end": "0:00:36.0026333"
            },
            {
                "adjustedStart": "0:00:36.6699666",
                "adjustedEnd": "0:00:36.7367",
                "start": "0:00:36.6699666",
                "end": "0:00:36.7367"
            },
            {
                "adjustedStart": "0:00:37.2038333",
                "adjustedEnd": "0:00:39.6729666",
                "start": "0:00:37.2038333",
                "end": "0:00:39.6729666"
            }
        ]
    }
]

Limitations et hypothèses

Il est important de noter les limitations de la personne mappée, afin d’éviter ou d’atténuer les effets des correspondances manquées entre personnes ou des personnes qui n’ont pas de correspondance.

La condition préalable pour la correspondance est que la personne affichée comme personne observée a été détectée et qu’elle se trouve dans l’aperçu Personnes.
Pose : les pistes sont optimisées pour gérer les personnes observées qui apparaissent le plus souvent à l’avant.
Obstructions : il peut y avoir des correspondances entre des visages et les personnes observées en cas d’obstruction (les personnes ou les visages se chevauchent).
Allocation spatiale par image : il peut y avoir des erreurs de correspondance quand des personnes différentes s’affichent dans la même position spatiale relativement à l’image dans un bref laps de temps.

Voir les limitations de la fonction Personnes observées : Suivre les personnes observées dans une vidéo