Estimation de la posture humaine par capteur RGB-D - LAAS - Laboratoire d'Analyse et d'Architecture des Systèmes Accéder directement au contenu
Thèse Année : 2015

Estimation of human posture by RGB-D sensor

Estimation de la posture humaine par capteur RGB-D

Résumé

In a world where the population is increasingly aging, elderly people falling is a public health issue. The use of technology is a major development axis for fall management. We want to design a complete system for detection and estimation of falls. The target market for this system is medicalized retirement homes and individual homes. We want to improve the medical care of people after a fall in order to reduce its consequences. A solution based on an ambient sensor seems to be the most adapted solution. Recent developments in RGB-D (Color+Depth) sensing are a great asset thanks to their relatively low cost, wide availability and good performances. The first part of the thesis deals with the problem of segmenting people from the surrounding scene in our images. We present an algorithm that determines the silhouettes of each person in the room in which the sensor is installed, thanks to simultaneous use of color and depth. The algorithm is robust to the change of configuration of the room and especially to moving furniture. We use special consideration of depth to reach a performance level sufficient for an industrial application. The second part of the thesis deals with the estimation of the human posture. Once the silhouettes have been segmented with the algorithm described in the first part, we want to get an estimation of every articulation of the person. We build on existing algorithms that use machine learning and in particular Random Forest by investigating new ideas to improve performances. We found optimal values for some parameters that were not previously investigated. We present a new feature to be computed on depth images. Finally we evaluate the impact of balancing the training database in our context. The algorithm provides a set of predictions for the position of every articulation. In the third part, we focus on spatio-temporal filtering of the postures. We examine different approaches and in particular we deal with the issue of left/right ambiguity that arises in the algorithm presented in the previous part. The approaches are based on Bayesian filtering.
Dans le contexte du vieillissement de la population, le problème de la chute est un problème de santé publique. L’utilisation de la technologie est un axe important pour la prise en compte des enjeux liés à la chute. Nous voulons développer un système complet de détection et d’estimation de la chute à destination des maison de retraites et des particuliers dans un but d’amélioration de la prise en charge médicale et de limitation des conséquences de la chute. La solution de détection à l’aide d’un capteur ambiant déporté nous a semblé être la solution la plus adaptée. Les capteurs RGB-D (couleurs + profondeur) développés récemment sont un atout pour cela car ils sont peu chers, très commun et performants. La première partie de la thèse traite du problème de segmentation de la silhouette de la personne dans la scène observée. Nous présentons un algorithme qui fourni, grâce à une utilisation conjointe des images de couleurs et de profondeur, les silhouettes des différents personnes dans la pièce dans laquelle est situé le capteur. L’algorithme est robuste au changement de configuration de la pièce et notamment au déplacement d’objets. L’utilisation de caractéristiques propres à la profondeur nous permet d’atteindre des niveaux de performances suffisant pour une utilisation industrielle. Dans la seconde partie de la thèse nous abordons le problème de l’estimation de la posture humaine. Une fois les silhouettes segmentées grâce à l’algorithme de la première partie, nous voulons avoir les positions des articulations de la personne. Nous incrémentons sur les algorithmes déjà existants utilisant l’apprentissage et notamment les algorithmes des randoms forests en investiguant de nouvelles idées pour augmenter les performances. Nous déterminons les valeurs optimales de certains paramètres qui ne sont pas explorés dans les travaux précedents. Nous présentons un nouveau type de caractéristique à calculer sur les images de profondeur. Nous examinons enfin l’impact de l’équilibrage de la collection d’apprentissage dans notre contexte. L’algorithme fourni alors un ensemble de prédiction pour chaque articulation. Dans la troisième partie, nous traitons le problème du filtrage spatio-temporel des poses. Nous présentons différentes approches et nous intéressons à l’ambiguïté droite/gauche des membres et cherchons à traiter ce problème. Les approches utilisées se fonde sur le filtrage bayesien.
Fichier principal
Vignette du fichier
MARTI Lucas.pdf (18.68 Mo) Télécharger le fichier
Loading...

Dates et versions

tel-01393419 , version 1 (07-11-2016)

Identifiants

  • HAL Id : tel-01393419 , version 1

Citer

Lucas Marti. Estimation de la posture humaine par capteur RGB-D. Robotique [cs.RO]. Universite Toulouse III Paul Sabatier, 2015. Français. ⟨NNT : ⟩. ⟨tel-01393419⟩
153 Consultations
58 Téléchargements

Partager

Gmail Facebook X LinkedIn More