Segmentation des données d'une caméra vidéo

introduction

Dans le monde moderne, la tâche de segmentation, comme il s'est avéré, est résolue une ou deux fois, même si je pensais que c'était quelque chose de compliqué et de surprenant. Il suffit de lire quelques articles, d'installer certaines bibliothèques et de baliser les données, tout ce qui prend quelques heures, sauf pour créer un échantillon de test.

Balisage des données

Cette étape de la mise en œuvre de la segmentation des images de flux vidéo est l'une des plus exigeantes en termes de travail humain.

Pour ce faire, vous devez utiliser des programmes spéciaux pour marquer les images du flux vidéo. Nous ouvrons simplement le fichier vidéo requis avec ce programme et marquons les images, après avoir créé au préalable des classes dans lesquelles nous segmenterons les images. Dans mon exemple introductif, les cadres sont divisés dans les classes suivantes (voiture, route, passage pour piétons, pelouse, bâtiments, personnes, trottoir, marquages ​​routiers).

En fait, des positions telles que la route, les bâtiments, les pelouses, les trottoirs, etc. il est possible de ne pas le reconnaître, puisque la caméra dans ce cas est fixée de manière rigide et donc ces zones seront toujours au même endroit.

Figure:  1 Programme de marquage des images d'un flux vidéo
Figure: 1 Programme de marquage des images d'un flux vidéo

Formation d'un réseau neuronal pour la segmentation d'image

( , ).

.

, . 4 (, , ... , , , ) 60 DeepLab v3+ ( ResNet-18). . 2.

, , , . .

Figure:  2 Utilisation d'un réseau neuronal à formation rapide pour la segmentation d'image
. 2

, (. 3 4), .

Figure:  3 Création d'un masque pour le segment de route d'intérêt
. 3
Figure:  4 Masque créé du segment de route d'intérêt
. 4

, (. 5 6).

Figure:  6 Segmentation du tronçon routier d'intérêt
. 6

, , (. 7 9). (. 8).

3%, 54%. , . , , , . .

Figure:  7 Le pourcentage de la superficie des voitures par rapport à la superficie de la route et de ses éléments est d'environ 3%
. 7 ~3%
Figure:  8 Analyse de la congestion routière aux heures de pointe
. 8
Figure:  9 Le pourcentage de la superficie des voitures par rapport à la superficie de la route et de ses éléments est d'environ 54%
. 9 ~54%

, . ( ), , .

- , . ( , ), . ., . , . , , . , , , , , , .

PS Si quelqu'un sait quel logiciel peut être utilisé pour enregistrer un flux vidéo à partir d'un flux YouTube aussi simplement que possible?) Les caméras écrivent simplement des données dans un tampon circulaire (les 12 dernières heures) sous la forme d'un flux YouTube, formant ainsi une surveillance vidéo, où chaque habitant de la maison peut voir les 12 dernières heures.




All Articles