本稿は、単一のRGBカメラで撮影されたビデオストリームを入力に、ネットワークに基づいてリアルタイムの3Dハンドトラッキングを提案します。上画像のように、指が物で隠れたとしても乱れることなく正確に推定することができます。
これらのことで、オブジェクトに隠れたとしても推定し、手の動きを正確にトラッキングすることを可能にします。ただし、背景が手のような外観や、複数の手が入力画像内で重なったりしていると、追跡が不安定になるとしています。