Feasibility study of a serious game based on Kinect system for functional rehabilitation of the lower limbs

• Published in: European Research in Telemedicine / La Recherche Européenne en Télémédecine 2016-09, Vol.5 (3), p.97-104
• Main Authors: Tannous, H., Istrate, D., Ho Ba Tho, M.C., Dao, T.T.
• Format: Article
• Language: English
• Subjects: 3D computer vision; Engineering Sciences; Functional rehabilitation; Jeux sérieux; Kinect sensor; Musculoskeletal system; Real-time monitoring; Rehabilitation at home; Rééducation fonctionnelle; Rééducation à la maison; Senseur Kinect; Serious game; Signal and Image processing; Supervision en temps réel; Système musculosquelettique; Vision 3D par ordinateur
• ISSN: 2212-764X; 2212-764X
• DOI: 10.1016/j.eurtel.2016.05.004

Conventional functional rehabilitation costs time, money and effort for the patients and for the medical staff. Serious games have been used as a new approach to improve the performance as well as to possibly reduce medical cost in the future for cognitive rehabilitation and body balance control. The objective of this present work was to perform a feasibility study on the use of a new real-time serious game system for improving the musculoskeletal rehabilitation of the lower limbs. A basic functional rehabilitation exercise database was established with different levels of difficulties. A 3D virtual avatar was created and scaled to represent each subject-specific body. A portable and affordable Kinect sensor was used to capture real-time kinematics during each exercise. A specific data coupling process was developed. An evaluation campaign was established to assess the developed system. The squats exercise was the hardest challenge. Moreover, the performance of each functional rehabilitation exercise depended on the physiological profile of each participant. Our game system was clear and attractive for all functional rehabilitation exercises. All testing subjects felt motivated and secure when playing the rehabilitation game. The comparison with other systems showed that our system was the first one focusing on the functional rehabilitation exercises of the lower limbs. Our system showed useful functionalities for a large range of applications (rehabilitation at home, sports training). Looking forward, new in-situation exercises will be investigated for specific musculoskeletal disorders. La rééducation fonctionnelle classique est coûteuse en temps et argent pour les patients ainsi que pour l’équipe médicale. Les jeux sérieux sont actuellement utilisés pour améliorer la performance et potentiellement réduire le coût médical dans le futur pour la rééducation cognitive et le contrôle de l’équilibre du corps. L’objectif de cet article est de réaliser une étude de faisabilité sur l’utilisation d’un nouveau système de jeux sérieux pour améliorer la rééducation fonctionnelle des membres inférieurs. Une base d’exercices de rééducation fonctionnelle a été établie. Les exercices de différents niveaux de difficulté ont été créés et implémentées. Une représentation 3D de chaque sujet a été créée. La caméra Kinect a été utilisée pour acquérir la cinématique des exercices. Un couplage entre cette cinématique et la représentation 3D a été effectué. Une campagne d’évalua