AI時短ラボ
検証· 約5分

Gemini「エージェント型の動画理解」──毎秒1フレームで丸ごと読む代わりに、必要な区間だけ探して見直す。トークン最大88%減・費用最大66%減・精度最大7%向上(Google DeepMind、3.7 Flash・3.6 Flash・3.5 Flash-Lite)。APIの設定を"agentic"にするだけ、追加料金なし。Geminiアプリと「Ask YouTube」にも順次

Google DeepMindは2026年9月1日、Gemini APIに「agentic video understanding(エージェント型の動画理解)」を導入した。従来は動画を固定のフレームレート(既定1FPS)で丸ごと取り込んでいたが、新方式はモデルが内部ツールで動画の必要な区間だけを読み込み、何を・どの速さで・どの様相(フレーム・音声・字幕)で見るかを自分で決める。標準的な動画ベンチマークで費用最大66%減・トークン最大88%減・精度最大7%向上(3.7 Flashの例)。0.1秒未満の瞬間の特定、数時間の動画からの検索、異常検知、動作や物体の数え上げに向く。Gemini 3.7 Flash・3.6 Flash・3.5 Flash-Liteで、Google AI StudioとGemini Enterprise Agent Platformから、API設定のprocessingを"agentic"にすれば使え、料金は通常のトークン課金のみ。Geminiアプリ全ユーザーと、YouTubeの「Ask YouTube」にも数か月内に。

Gemini「エージェント型の動画理解」──毎秒1フレームで丸ごと読む代わりに、必要な区間だけ探して見直す。トークン最大88%減・費用最大66%減・精度最大7%向上(Google DeepMind、3.7 Flash・3.6 Flash・3.5 Flash-Lite)。APIの設定を"agentic"にするだけ、追加料金なし。Geminiアプリと「Ask YouTube」にも順次
執筆・編集:
目次

2026年9月18日・日本時間時点の情報です。 Google DeepMindのブログ(9月1日)を読んだ。当サイトはGemini 3.7 Flashの発売は追ったが、同月に入ったこの動画機能は扱っていなかった。Gemini APIの使い方はGoogle AI StudioとGemini APIの手引きに。

3行まとめ

  1. 何が変わるか。 これまでの動画理解は「静的」で、動画を固定のフレームレート(既定1FPS、APIで変更可)で丸ごと取り込んでいた。新しいエージェント型の動画理解は、モデルが何を見るか・どの速さで見るか・どの様相(フレーム/音声/字幕)で見るかを自分で決め、内部ツールで動画ファイルの必要な部分だけを読み込む。画像版の「agentic vision」(コード実行と画像理解の組み合わせ)と同じ発想の動画版で、開発者が手で組んでいた「該当区間を切り出して見直す」ループをモデル側が回す。
  2. 数字。 標準的な動画ベンチマークで、費用最大66%減・トークン最大88%減・精度最大7%向上(グラフは3.7 Flash)。10分の解説動画から90分の講義、数時間の録画まで長いほど差が出る。向く用途として、1FPSでは落ちる1秒未満の状態変化の特定(自動編集)、数時間の動画からの「干し草の山から針」検索、注目区間を高FPSで再サンプルする異常検知、繰り返し動作や物体の数え上げを挙げる。
  3. 使い方と範囲。 Gemini 3.7 Flash・3.6 Flash・3.5 Flash-Liteで、Google AI StudioとGemini Enterprise Agent PlatformのGemini APIから、動画のアップロードとYouTube動画に使える。API設定のprocessingを"agentic"にするだけで、料金は通常のトークン課金のみ・機能追加料なし。Geminiアプリの全ユーザー(FlashとFlash-Lite)に近く展開し、数か月内にYouTubeの**「Ask YouTube」**の裏側にも入る。

精度が上がる理由と対象外モデル

  • 「安くなる」の仕組みが明快で、読むフレームを減らしているだけなので、精度が上がる理由は「注目区間を高FPSで見直せる」側にある。1FPSの取りこぼしが多い速い動作の動画ほど恩恵が大きい、と読める
  • 当サイトのAsk YouTubeの記事で見た「視聴ページの質問機能」が、この動画理解に載り替わる予定だと本文にある
  • 数字はGoogle自身の測定で、ベンチマーク名として本文に出るのはLongVideoBench。「最大」の値なので平均ではない
  • 3.8 Flash(9月2日発売)は対象に書かれていない。時系列上は前日の発表なので、対応状況は別途確認が要る

ブログの記載を照合、動画は未検証

この記事の下調べで、筆者は9月18日にGoogle DeepMindのブログを取得し、対象モデル・数字・設定名(processing: "agentic")・コード例がその原文にあることを確認した。開発者ガイドは開いていない。筆者は自分のAPIで動画を投げて試していない。

3.8対応・内訳・展開日は非公開

  • 3.8 Flashでの対応
  • ベンチマークの内訳(LongVideoBench以外)と「最大」の条件
  • Geminiアプリ側の展開日

出典はGoogle DeepMindのブログ

関連記事

シェア: ポスト はてブ

出典・参照資料

AIニュースの解説を動画でも

YouTubeでは注目ニュースの背景を解説し、Xでは新着記事をお知らせしています。

コメント

まだコメントはありません。最初のコメントを書いてみませんか?

AIについて聞きたいことはありますか?

質問箱で無料で受け付けています。回答は公開され、他の方の参考にもなります。

質問箱を見る →

新しい記事をメールで受け取る

AIの新しい発表を、出典付きで整理して届けます。

関連記事

Google、Gemini 3.7 Flashを発表──3.6から3週間・導入価格は半額の0.75ドル、一方で総合指標と知識労働は他社の下の記事画像
モデル08.14読了22分

Google、Gemini 3.7 Flashを発表──3.6から3週間・導入価格は半額の0.75ドル、一方で総合指標と知識労働は他社の下

出典 ─ Google公式ブログ: Introduci
Google AI Studio 使い方──Gemini APIを無料で試す方法【2026年】の記事画像
活用07.05読了11分

Google AI Studio 使い方──Gemini APIを無料で試す方法【2026年】

出典 ─ No Code MBA
YouTube「Ask YouTube」発表、動画を会話型AI検索で探す新機能とShortsのGemini Omniリミックスの記事画像
プロダクト08.15読了11分

YouTube「Ask YouTube」発表、動画を会話型AI検索で探す新機能とShortsのGemini Omniリミックス

出典 ─ All the YouTube news f
Geminiアプリの使い方【2026年9月版】──無料でできること、モデル(Flash-Lite・Flash・Pro)と思考レベルの選び方、5時間ごとの使用量上限、プラン別のコンテキスト(3.2万・12.8万・100万トークン)、Live・Deep Research・Canvas・Gem・Sparkの入口の記事画像
活用09.19読了14分

Geminiアプリの使い方【2026年9月版】──無料でできること、モデル(Flash-Lite・Flash・Pro)と思考レベルの選び方、5時間ごとの使用量上限、プラン別のコンテキスト(3.2万・12.8万・100万トークン)、Live・Deep Research・Canvas・Gem・Sparkの入口

出典 ─ Gemini アプリ ヘルプ(2026-09-18取得)
Nano Banana Proを動画生成の参照画像に使う──Google公式ドキュメントのコード例を確認したの記事画像
検証09.05読了11分

Nano Banana Proを動画生成の参照画像に使う──Google公式ドキュメントのコード例を確認した

出典 ─ Gemini API Docs
Googleの「Agent Anomaly Detection」がプライベートプレビュー──エージェントの推論の痕跡・ツール呼び出し・実行の流れを事後に読んで「境界の外の振る舞い」を見つける。OWASP Agentic Top 10の4項目+資源枯渇、応答は遅くしない、Security Command Centerに通知、APIで次のツール呼び出しを止められるの記事画像
プロダクト09.25読了8分

Googleの「Agent Anomaly Detection」がプライベートプレビュー──エージェントの推論の痕跡・ツール呼び出し・実行の流れを事後に読んで「境界の外の振る舞い」を見つける。OWASP Agentic Top 10の4項目+資源枯渇、応答は遅くしない、Security Command Centerに通知、APIで次のツール呼び出しを止められる

出典 ─ Google for Developers(Achuth Narayan Rajagopal・2026年9月16日・9月18日取得)
Veo 3.1の使い方と料金【2026年9月版】──8秒・720p〜4K・音声つき、Standard/Fast/Liteの1秒あたり$0.05〜0.60、延長・最初と最後のフレーム指定・参照画像3枚、Googleが「既定はGemini Omni Flash」と書く現在の位置づけ、Flowでの使い方の記事画像
活用09.25読了12分

Veo 3.1の使い方と料金【2026年9月版】──8秒・720p〜4K・音声つき、Standard/Fast/Liteの1秒あたり$0.05〜0.60、延長・最初と最後のフレーム指定・参照画像3枚、Googleが「既定はGemini Omni Flash」と書く現在の位置づけ、Flowでの使い方

出典 ─ Google公式(Last updated 2026-09-17 UTC・9月18日取得)
Google公式ブログの発表ページのヘッダー画像。「Video duration」のスライダー、「Extend」ボタン、720p/1080pの解像度選択が描かれている
プロダクト09.24読了20分

Google Vids、Gemini Omni 1.1 Flashで誰でも無料の1080p動画生成へ──個人アカウントの無料枠は英語版ヘルプで「月6本」

出典 ─ Google公式ブログ「Anyone can