top of page
bk-shin.png

開発者レポート

「Challenge ATOM」にチャレンジするチームの奮闘をレポート!

KAINA、ただいま茶道の稽古中

1 日前
読了時間: 4分

KAINA工房/東京農工大学

【第2回】2026年11月



 茶碗に指を添え、丁寧に扱い、静かに元の場所へ戻す。茶道では、そんな一つひとつの動きに細やかな作法があります。


その所作を五指ロボットにどう学ばせるのか。KAINA工房では、ロボットの“目”と“手”をさらにアップデート。繊細な動きを教えるための準備が整ってきました。


 太田さんがこだわってきたのが、人間と同じ5本の指を持つロボットハンド。手の大きさは太田さん自身の手とほぼ同じで、関節の位置も自分の手に合わせて設計されています。それにより、関節を曲げる角度などを効率よく教えられる仕組みを実現しています。


「見る」「動かす」「覚える」を、もっと繊細に

 茶道の所作をロボットで再現するには、腕を目的の位置へ動かすだけでは足りません。茶道具がどこにあるのかを正確に捉え、そこへ手を運び、親指をどこに添えるのか、指先をどこで合わせるのか。細かな動きまでロボットに教える必要があります。チームは「見る」と「動かす」の両方をアップデートしました。

 

 まずは、視覚系です。これまでの頭部カメラに加え、机に近い胴体部分にもカメラを追加(技術協力のORBBEC日本事務所より貸与)。2つの視点から卓上を見ることで、ロボット自身の手などで隠れていた領域も捉えやすくなり、これまで死角になっていた位置の物体もつかめるようになりました。


 一方で、視野が広がれば別の問題も生まれます。机の奥まで見えるようになったことで、前を横切る人など、操作には必要のない情報までセンサーに入ってしまうからです。そこで、一定距離より奥の情報を除外しながら、上下2つのカメラから得られるセンサー情報を融合。単に「見える範囲を増やす」のではなく、必要な領域をより安定して捉える視覚系へと調整を重ねています。


 さらに現在、取り付けを進めているのが手首カメラです。小さな茶道具でも画面上で大きく捉えられるだけでなく、手首を基準に対象との相対的な位置関係を把握できるようになります。

「対象が手首カメラから見て右にあるなら、もう少し右へ」といった制御につなげられるため、これまで失敗率が高かった動作の精度向上も期待されています。

 

 そして「手」の側で新たに導入したのが、指の動きを捉えるデータグローブです。

これまではVRヘッドセットの外部カメラから手指の形を推定していましたが、データグローブによって、より高精細に指先の位置や動きを取得できるようになりました。親指をどこに添えるのか、物をつまむときに2本の指先をどこで合わせるのか。細やかな所作をロボットへ伝えるためには、操作する人の指の動きを精度よく捉えることが重要になります。


 ここで生きてくるのが、太田開人さんがKAINAのハンドを自分の手に酷似した大きさと関節配置で設計したことです。人とロボットで手の構造が異なる場合、人の指先の位置をロボット側の関節角度へどう対応させるかが難しくなります。KAINAは人の手に近い構造を持つことで、データグローブから取得した指の動きをロボット側へ対応させやすくしています。

 

 テレオペレーションによる教師データの収集も佳境を迎えています。現在は、一つの動作につき30〜50回程度のデータを収集し、学習にはおよそ2〜3時間をかけています。30〜50回と聞くと、それほど多くないようにも思えますが、実機でのデータ収集はかなり地道です。1回の動作を終えるたびに、茶道具とロボットを初期状態へ戻して再び操作。途中で失敗すれば、また初めから。さらに、操作中はロボットの初期位置に合わせて腕を上げた姿勢を維持する必要があります。30回ほどのデータを集めるだけでも作業は約1時間に及び、人間の腕も限界に。体力勝負の開発でもあります。

こうして「見る」「動かす」「学習させる」を一つずつ積み上げ、KAINAは茶碗をつかむところまで到達。 さらに、水を入れて流す「茶碗を洗う」一連の所作も、テレオペレーションで再現できる目途が立ってきました。



Next Challenge

目指すは、ひとりで「仕舞のお点前」

 次のステップは、これまで一つずつつくってきた動きをつなぎ、茶道の「仕舞のお点前」を一連の自律動作として成立させることです。


 そのために、まずは手首カメラなどを含めたハードウェアの構成を固めます。模倣学習では、カメラの位置や機体の構成が変わると、それまで集めたデータをそのまま使えなくなることがあります。完成形に近い状態までKAINAを仕上げてから、テレオペレーションによる教師データを本格的に蓄積していきます。


 12月のデモンストレーションでは1分〜1分半ほどの一連のお点前を、人の操作なしでKAINA自身が行うことを目指します。KAINAの茶道の稽古は、いよいよ自律動作へと進みます。

bottom of page