ニコンは移動型作業ロボット（モバイルマニピュレーター）の高速画像制御を可能にするハンドカメラを開発した。５００分の１秒で撮影し、その画像データを処理してロボットハンドの手元の位置ずれなどを制御する。画像処理とロボット制御の組み合わせで、１秒間に１００回の信号を送る１００ヘルツでの制御を確認した。適用する作業に合わせて画像処理などを調整することで、今後５００ヘルツでの高速制御ロボットに提案する。

三つのカメラとプロジェクターをロボットハンドに載せた。カメラは２次元（２Ｄ）画像を撮るものが１台、ステレオ視で３次元（３Ｄ）情報をとるカメラが２台になる。例えば２Ｄ情報を撮る際には赤い照明をともし、３Ｄ情報は別の波長でとる。カラーフィルターと照明の組み合わせで計測を切り替える。

２次元コードを使った加工対象物（ワーク）の認識では、タグの位置と向きの６軸情報をとりつつ、ロボットハンドを制御する。撮影から制御、動作を毎秒１００回のペースで繰り返す。バラ積みからのピッキングや移動対象への加工を認識、制御するのに適している。カメラの性能は毎秒５００回計測できるため、負荷の軽い画像処理と高速アクチュエーターを組み合わせると高速フィードバック制御が可能になる。

こうした制御はモバイルマニピュレーターの重要技術。コロナ禍で導入検討が増えたが、一度ロボットが静止し位置を計測し直してから腕を伸ばすため、作業効率に課題がある。人間が歩きながら部品をピッキングするような作業には、ロボットハンドの手元の位置ずれなどを微調整する必要があった。