アーカイブ / Robotics / Computer Vision
接触を測る表面を動かし、物体の回転角を制御する触覚センサー「DTactive」
DTactive
DTactiveの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1 : A two-finger gripper is equipped with DTactive at its ends, using the tactile feedback and active surface of the sensors to perform bottle cap flipping manipulation. The numbered images represent the sequential steps of the operation.
概要
- DTactiveは接触形状を撮る表面を動かし、二指グリッパー内で物体を回す。
- 左右の触覚深度画像と磁気エンコーダ値を使い、表面速度と実際の回転速度のずれを学習して角度制御に反映する。
- 著者らの角度追従実験ではRMSEが学習対象9種類で12度未満、新規対象3種類で19度未満だったが、A1の角度誤差は比較手法の方が小さい。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、DTactiveの仕組み
- 01目標角度と触覚画像
- 02回転速度を補正
- 03表面速度を指令
- 04物体の角度を推定
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
DTactiveは、物体との接触を撮影しながら、接触面を動かして手の中の物体を回すセンサーだ。視覚式触覚センサーとは、押されて変形した表面を内部のカメラで撮り、接触した形を読み取る装置を指す。
手の中では接触部が外部カメラから隠れやすく、回す間の状態を把握しにくい。多関節ハンドは制御が複雑で、従来の円筒形ローラーには小物をつかむ際の隙間や接触面積の制約がある。そこで、接触を測る面そのものを動かす構成が検討された。
手法
二指グリッパーの左右にDTactiveを取り付ける。各センサーは接触で変形した表面を内部から撮影し、押し込み形状を高さで示す深度画像を作る。可動表面は駆動機構で動かし、磁気エンコーダという回転角を測る部品から駆動部の動きも得る。
学習モデルは左右の深度画像と表面の速度から、指令した回転速度に対する実際の回転速度の比を推定する。別のモデルは望む回転速度に必要な指令を求める。制御器は推定角度と目標角度の差、押し込み量、接触位置を使い、握り方と左右の表面速度を調整する。例えば物体を指定角度まで回す際は、接触状態に応じて速度を補正し、角度を逐次推定する。
新規性
DTactiveは、既存のDTactによる接触形状の立体復元を可動表面に合わせて改良し、触覚計測と物体を回す動作を一つのセンサーに組み込んだ。白色光を表面に垂直に当てる光学方式と、平らな接触面を採用している。
制御面では、接触画像だけでなく表面駆動部の磁気エンコーダ値も使う。表面の動く速さと物体が実際に回る速さのずれを学習し、角度推定と速度指令に反映する点が提案の中心だ。
従来手法との違い
著者らは円筒形の触覚ローラーを設計上の比較対象に挙げる。円筒形では平面上の小物をつかむ際に隙間ができ、接触面も限られるという。寸法に基づく幾何解析では、把持できる物体の最小半径をローラー型で5 mm、DTactiveで2.81 mmと算出した。これは実測の把持成功率ではない。
回転制御は、オープンループ制御とも比較した。オープンループとは、動作結果を戻して指令を補正しない方式を指す。掲載表では提案手法の角度誤差が小さい対象が多いが、A1ではオープンループの方が小さい。
実験結果
著者らは12種類の物体を選び、学習対象9種類では各4本、計36本の回転軌道と3万5000フレーム超を毎秒20フレームで記録した。各対象の3本を学習に使い、残りを未使用軌道として評価した。新規対象3種類からは各1本を収集し、実際の角度は物体に付けたマーカーで測った。
正弦波状の目標角度を追うオンライン実験では、著者らは角度の二乗平均平方根誤差（RMSE）が学習対象9種類すべてで12度未満、新規対象3種類すべてで19度未満と報告した。RMSEは角度差の大きさをまとめた指標だ。ただしA1ではオープンループが7.51度、提案手法が9.90度だった。滑らかさの指標でも全対象を改善したわけではない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：小型部品を検査カメラに向けて指定角度まで回す工程を想定する。入力は左右の触覚深度画像、駆動部の磁気エンコーダ値、目標角度で、出力は推定角度と表面の速度指令とする。
導入には対象部品の回転軌道と触覚画像を集め、外部で測った実角度を教師ラベルとして二つの学習モデルを適応させる必要がある。部品を二指でつかみ、接触位置を見ながら回し、撮影時の角度を確認する。検査工程での有効性は未検証だ。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象部品を数種類に絞り、二指での把持と回転を試す。左右の触覚深度画像、磁気エンコーダ値、目標角度、外部計測による実角度を同期して記録する。実角度から回転速度と補正比の教師ラベルを作り、対象部品のデータで二つのモデルを適応させる。
比較基準は論文と同じくオープンループ制御とする。学習に使わない軌道と部品を分け、目標角度とのRMSE、動きの滑らかさ、物体が接触面の中央から外れる頻度を測る。作業で許容できる値を先に決め、部品ごとに結果を判定する。
限界と課題
著者らは今後の課題として、センサーの小型化、角の半径の縮小、多関節ハンドの指への搭載を挙げている。掲載された回転実験は二指グリッパーと選定した12種類の物体によるもので、別の部品や作業条件での性能は示していない。
編集上の検証事項は、対象部品の把持安定性、表面の摩耗や照明変化が深度画像と角度推定に及ぼす影響だ。掲載表ではA1の角度誤差と、A1・C3・N2の動きの滑らかさで比較手法の値が良い。対象ごとに両指標を確認したい。
出典
元のタイトル・要旨を確認する（英語）
DTactive: A Vision-Based Tactile Sensor with Active Surface
The development of vision-based tactile sensors has significantly enhanced robots' perception and manipulation capabilities, especially for tasks requiring contact-rich interactions with objects. In this work, we present DTactive, a novel vision-based tactile sensor with active surfaces. DTactive inherits and modifies the tactile 3D shape reconstruction method of DTact while integrating a mechanical transmission mechanism that facilitates the mobility of its surface. Thanks to this design, the sensor is capable of simultaneously performing tactile perception and in-hand manipulation with surface movement. Leveraging the high-resolution tactile images from the sensor and the magnetic encoder data from the transmission mechanism, we propose a learning-based method to enable precise angular trajectory control during in-hand manipulation. In our experiments, we successfully achieved accurate rolling manipulation within the range of [ -180°,180° ] on various objects, with the root mean square error between the desired and actual angular trajectories being less than 12° on nine trained objects and less than 19° on three novel objects. The results demonstrate the potential of DTactive for in-hand object manipulation in terms of effectiveness, robustness and precision.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01