双腕ロボットが古琴の楽句を演奏し触覚と音で確認
Phrase-Level Robotic Guqin Performance: Bimanual Motion Planning and Audio-Tactile Interaction Monitoring
この論文をやさしく読む
ひとことで言うと
左右の腕で異なる役割を担うロボットが、古琴の弦を弾き、触れてハーモニクスを出す動作を連続した楽句として実行します。
何に役立つ?
楽器演奏を通じて、接触タイミングが厳しい双腕作業の計画と監視を評価できます。視覚、触覚、音を役割に応じて組み合わせています。
この研究の面白いところ
衝突しない動作だけでは足りず、左手の接触を保ちながら右手で瞬間的に弾いて狙った音を出す必要があります。実物の古琴を使って検証している点が特徴です。
どこまで分かった?
実証範囲は25イベントの楽句と、その反復試行です。要旨の93.6%と96.8%はイベント正確率であり、楽曲全体の成功率や演奏の芸術的評価ではありません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
ヒューマノイドロボットと身体性を備えた知能の近年の進歩により、ロボットはますます複雑な操作タスクを実行できるようになった。しかし、楽器演奏は依然として難しい評価課題である。衝突のない軌道実行だけでなく、精密な接触タイミング、左右非対称な双腕協調、実物の楽器で狙った音響結果を生むことが求められる。7本の弦を持つフレットのないツィター属の楽器である古琴は、ミリメートル単位の弦間隔、瞬間的な右手の撥弦、持続的な左手のハーモニクス用接触のため、独特な操作上の課題がある。 本研究では、楽句単位で古琴を自律演奏する、異種の双腕を備えた実機ロボットシステムを提示する。古琴演奏を離散・連続のハイブリッドな実行問題として定式化し、連続する音楽イベント全体で、使用する指の割り当て、姿勢の連続性、障害物回避、厳密な双腕接触スケジュールを協調させる階層的な計画の枠組みを開発する。システムには、視覚に基づく楽器位置の特定、触覚によるハーモニクス接触の監視、聴覚フィードバックを用いた撥弦パラメータの校正を統合する。25イベントからなる楽句の実機実験では、実物の古琴で開放弦と七徽のハーモニクスの系列を協調して安定して実行でき、反復試行を通じて93.6%および96.8%のイベント正確率を達成した。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-21(UTC)
- 最新改訂
- 2026-09-21 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-21 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Recent advances in humanoid robotics and embodied intelligence have enabled robots to perform increasingly complex manipulation tasks. However, musical instrument performance remains a formidable benchmark, demanding not only collision-free trajectory execution but also precise contact timing, asymmetric bimanual coordination, and target acoustic outcomes on physical instruments. The guqin, a seven-string fretless zither, presents unique manipulation challenges due to its millimetric string spacing, transient right-hand plucking, and sustained left-hand harmonic contacts. In this work, we present a physical heterogeneous dual-arm robotic system for phrase-level autonomous guqin performance. We formulate guqin playing as a hybrid discrete--continuous execution problem and develop a hierarchical planning framework that coordinates working finger assignment, configuration continuity, obstacle avoidance, and tight bimanual contact schedules across consecutive musical events. The system integrates vision-guided instrument localization, tactile-based harmonic contact monitoring, and auditory feedback-informed plucking parameter calibration. Real-world experiments on a 25-event phrase demonstrate that the system reliably executes coordinated open-string and seventh-hui harmonic sequences on a physical guqin, achieving 93.6% and 96.8% event correctness across repeated trials.
arXiv ID: 2609.24133 / 要約の誤りについて