Android端末内の操作を呼び出す小型モデルの学習と評価
Extending FunctionGemma for Practical On-Device Mobile Function Calling
この論文をやさしく読む
ひとことで言うと
Android端末の操作を言葉で指定するため、小型モデルの学習データを広げて正答率を測った研究。
何に役立つ？
考えられる用途は、端末内で動くアシスタントの操作対象を増やすことである。要旨で示された実証は、用意したデータセットでの関数呼び出しの正答率である。
この研究の面白いところ
約9,500会話と15カテゴリを用意し、統合モデルでは対象範囲を広げながら一方の評価で76.5%を維持した。他方の評価では専用モデルより8.0ポイント低下した。
どこまで分かった？
評価値はMOBILEACTIONSEXTENDEDとMOBILEACTIONSGOOGLE上の結果である。実際の端末利用での遅延やプライバシー改善の測定結果は、要旨には示されていない。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
端末上で動くアシスタントには、自然言語を端末内の操作に対応付ける関数呼び出しモデルが必要だが、既存の資料はWeb APIや限られた種類のモバイル操作に重点を置いている。本研究はFunctionGemma 270M-itを実際のAndroidの操作に拡張するため、スキーマ検証済みの合成データセットMOBILEACTIONSEXTENDEDを導入した。約9,500件の会話を収め、メッセージ送信、通話、カメラ・スクリーンショット、画面の明るさ調整、端末状態の照会、懐中電灯、アプリ管理など15種類の端末制御を対象とする。 270Mモデルを、回答部分だけに損失を適用するTRLの教師ありファインチューニングで学習させ、拡張データ専用のモデルと、GoogleのMOBILEACTIONSGOOGLEも合わせて学習した統合モデルを作った。MOBILEACTIONSEXTENDEDでの一連の処理の正答率は、元モデルの29.3%、GoogleのMobile-Actions版の17.2%に対し、76.5%に向上した。統合モデルも同データセットで76.5%を維持し、MOBILEACTIONSGOOGLEでは82.3%に達した。ただし後者はGoogleのMobile-Actions専用モデルの90.3%より8.0ポイント低く、対象カテゴリを倍増させる代わりに生じた性能差である。研究者らはデータセット、追加学習済みモデル、再現可能な学習・評価手順、Androidのデモを公開し、小型モデルによる端末内の関数呼び出しが、低遅延でプライバシーに配慮したモバイルアシスタントへの実用的な道筋になると述べる。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-21（UTC）
- 最新改訂
- 2026-09-21 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-21 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
On-device assistants require function-calling models that map natural language to local system actions, but existing resources emphasize web APIs or narrow mobile-action catalogs. We extend FunctionGemma 270M-it to practical Android workflows by introducing MOBILEACTIONSEXTENDED, a synthetic, schema-validated dataset of ~9,500 conversations covering fifteen device-control categories, including messaging, phone calls, camera/screenshot, brightness control, device-status queries, flashlight control, and application management. We fine-tune the 270M model with TRL supervised fine-tuning under completion-only loss, producing an extended specialist and a combined model trained jointly with Google's MOBILEACTIONSGOOGLE. On MOBILEACTIONSEXTENDED, end-to-end accuracy improves from 29.3% for the base model and 17.2% for Google's Mobile-Actions variant to 76.5%. The combined model retains 76.5% on MOBILEACTIONSEXTENDED and reaches 82.3% on MOBILEACTIONSGOOGLE, down from the 90.3% of Google's Mobile-Actions specialist, representing an 8.0-percentage-point trade-off in return for doubling category coverage. We release the dataset, fine-tuned models, reproducible training/evaluation pipeline, and an Android demo, highlighting compact local function calling as a practical path towards low-latency and privacy-preserving mobile assistants.
著者のコメント
Accepted at EMNLP 2026. 16 pages, 1 figure, 8 tables. Includes main paper, references, and appendices. Code, datasets, models, and demo available at GitHub and Hugging Face
arXiv ID: 2609.25373 ／ 要約の誤りについて