Intel RealSense : le SDK pour la caméra 3D s’enrichit de nouvelles fonctionnalités

Intel RealSense : le SDK pour la caméra 3D s’enrichit de nouvelles fonctionnalités
et se débarrasse des modules obsolètes

Avec sa technologie RealSense, Intel veut voir se développer un marché dédié aux applications qui permettent par exemple de contrôler et déplacer les objets avec les gestes. Pour cela, Intel RealSense, la caméra 3D du fabricant de puces embarque, entre autres, un système de reconnaissance faciale, vocale, la suppression des arrière-plans, la réalité augmentée ainsi qu’une technologie de détection du mouvement des doigts et des mains pour donner aux appareils une interface plus intuitive.

Intel a donc mis à la disposition des développeurs un kit de développement (SDK) pour leur permettre de créer des interfaces utilisateur naturelles et conviviales. Actuellement à sa quatrième release, la dernière version du SDK Intel RealSense a introduit de nombreuses nouveautés qui sont probablement passées inaperçues pour bon nombre d’amateurs. Les notes de versions énumèrent une pile de changements et nouvelles fonctionnalités qu’on se contentera de survoler :

• support pour la fonction de suivi de regard ;
• support JavaScript/Web à nouveau intégré dans l’intégralité du SDK pour permettre l’exécution d’applications de jeux dans le navigateur. Il est disponible pour l’interaction naturelle, la commande et le contrôle vocal, et pour Unity C# (plateforme de lecteur Web) ;
• amélioration de la détection et du suivi des visages grâce à un nouvel algorithme ;
• le suivi de visage par la caméra R200 reconnaît les repères du visage ;
• ajout de 3DScan pour la configuration de la zone de numérisation, du nombre maximal de triangles et pour les notifications d’événements pendant la numérisation ;
• ajout de nouvelles interfaces pour un meilleur support photo/vidéographie ;
• l’interface SenseManager bénéficie de nouvelles fonctions pour supporter la vidéo améliorée ;
• le suivi des mains prend en compte les contours du masque de l’image et lisse le masque de l’image, avec aussi une meilleure reconnaissance du squelette de la main ;
• l'interface image a été améliorée pour permettre la récupération d’images pivotées ;
• l’interface photo intègre une fonctionnalité pour récupérer la profondeur originale de l’image ;
• orientation de la tête améliorée dans les grands-angles ;
• précision des repères améliorée (moins de faux positifs détectés), plus grande précision de la 2D/3D et amélioration des repères de grand-angle ;
• amélioration du suivi d’objet pour les objets 2D, avec un suivi d’objet 3D avancé ;
• une boîte à outils pour la calibration de la caméra et la création de fichiers de modèle et de configuration pour les objets, pour la fonctionnalité avancée de suivi en 3D ;
• suivi 3D instantané (SLAM) pour créer une carte et démarrer automatiquement le suivi avec un mode d’apprentissage extensible pour le suivi 2D/3D ;
• meilleure séparation entre les objets qui sont proches, mais qui ne se touchent pas, avec l’amélioration de la stabilité du point le plus proche ;
• etc.

Si des nouveautés s’invitent dans le SDK d’Intel RealSense, certains modules ou fonctions ont par contre été supprimés ou remplacés dans cette nouvelle version. Devenue obsolète, la fonction de détection des émotions a par exemple été remplacée par les fonctions de repères du visage et de détection du regard. On note également que l’application d’animation faciale sous Unity a été supprimée.

Plus de détails techniques et la liste exhaustive des nouveautés introduites dans cette nouvelle version du SDK sont disponibles sur le site d’Intel dédié à la caméra 3D. Pour intégrer les technologies Intel RealSense à leurs applications, les développeurs doivent utiliser à la fois le SDK et la caméra Intel RealSense (intégrée au système ou périphérique). Le téléchargement du kit de développement Intel RealSense est donc accompagné par le téléchargement des pilotes de caméras (la caméra avant F200 et la caméra arrière R200).

:fleche: En savoir plus sur le SDK et ses caractéristiques techniques
:fleche: Télécharger le SDK Intel RealSense
:fleche: Exemples de codes et documentation pour démarrer avec RealSense
:fleche: Forum dédié au SDK Intel RealSense