手話をAIが生成する時代へ──NHKの「手話CG」研究を公式サイトで確認した
NHKが研究開発する「手話CG」は、CGアバターと約8,000語分のモーションキャプチャデータを組み合わせて手話アニメーションを自動生成する技術。天気予報・ニュース速報・スポーツ実況で試作実施済みで、つくばエクスプレスでは運行情報の手話CG配信実証実験が2025年11月30日まで行われている。

目次
3行まとめ
- NHK放送技術研究所は、CGアバターと手話モーションキャプチャデータを組み合わせて手話アニメーションを自動生成する「手話CG」技術を研究開発しており、専用の研究紹介サイトを公開している。
- 天気予報・気象警報のような定型情報には「定型文方式」、ニュース速報のような非定型な文章には日本語と手話の対訳データ(約15万文対)で構築した翻訳AIによる「任意文方式」の2手法を使い分けている。
- 応用事例として、ニュース速報・スポーツ実況での試作に加え、つくばエクスプレスの鉄道運行情報を手話CGで配信する実証実験が2024年11月15日〜2025年11月30日の期間で実施されている。
なぜCGなのか──通訳士の人数という制約
手話CG研究紹介サイトの「手話CGとは」ページによると、全国の手話通訳士の数は約4,300人(2025年5月31日時点)で、「さまざまなサービスに広く手話を付与するにあたっては十分な数とはいえず、放送局で24時間365日通訳士を確保するのは難しい状況」と説明されている。とりわけ深夜早朝帯の災害報道など、緊急性の高い情報にどう手話で対応するかが課題だとしている。
サイトはまた、聴覚に障害があり手話を第一言語とする人にとって、日本語字幕は「日本語を第一言語とする人々が見る外国語の字幕と同じような感覚」になりうると説明する。日本語と手話は文法が異なる別言語であり、字幕だけでは情報アクセシビリティが十分でないという立場から、手話による情報提供の技術開発に取り組んでいるとしている。「手話CGとは」ページは、こうした取り組みの社会的背景として「手話に関する施策の推進に関する法律」が公布・施行されたことにも触れ、手話を使う人が安心して日常生活を送れる環境整備が進められているとしている(法律自体の条文・施行日は本記事では確認していない)。
仕組み──CGアバター×モーションキャプチャ×翻訳AI
「手話CG」は、CGアバターと手話モーションデータを組み合わせて手話映像を生成する技術で、手話モーションデータは実際の手話の動きを単語一つひとつモーションキャプチャして収録したものだという。NHKはこれまでに約8,000語の手話単語モーションのデータベースを構築しており、サイト上で単語データベース・地名データベースを一般公開している。
生成手法は大きく2つに分かれる。
- 定型文方式: 天気予報やスポーツ実況のように表現が定型化している情報向け。人の手で用意した「テンプレート」を、伝えたい内容に応じて変わる「データ」で穴埋めして手話CGを生成する。天気予報の例では、気象庁から受信した気象電文(晴れ・くもりなど)でテンプレートの空欄を埋める仕組みが説明されている
- 任意文方式: ニュースのような非定型な文章向け。日本語テキストと手話の語順を表す単語列の対訳を学習した翻訳AI(翻訳モデル)を使う。NHKは研究着手当初から10年以上かけて「NHK手話ニュース」の手話表現を人手で書き起こし、約15万文対の対訳データを蓄積してこの翻訳モデルを構築したとしている
任意文方式では、翻訳された手話単語列に対して、うなずき・間(ま)・口型といった「非手指動作」の文法要素を追加し、複数の手話単語モーションをなめらかに接続してアニメーションを生成する。研究紹介ページは、手指の形・動きが同じでも口型や表情、動きの強弱によって手話の意味が変わりうる点を、技術的な課題として明記している。
研究紹介ページは各技術要素の根拠として、学会誌に掲載された参考文献(DOI付き)を明記している。実際にDOIを開いてJ-STAGE(科学技術振興機構の学術誌公開プラットフォーム)で書誌情報を確認したところ、次の3本が確認できた。
| 技術要素 | 論文タイトル | 掲載誌 |
|---|---|---|
| 手話モーションデータベース | 手話CG評価サイトの構築と運営 | 映像情報メディア学会誌 69巻1号 |
| 定型文方式 | データからの手話CG生成技術 | 映像情報メディア学会誌 73巻6号 |
| 任意文方式 | ニュース速報を対象とした手話CGアニメーションの評価 | 映像情報メディア学会誌 79巻4号 |
いずれも映像情報メディア学会(ITE)が発行する学会誌で、69巻→73巻→79巻という巻号の推移からも、この研究がNHK放送技術研究所で長期にわたり継続的に発表されてきたことがうかがえる(本記事ではJ-STAGEの書誌情報ページを確認したのみで、各論文の本文までは読んでいない)。
どこまで実用化されているか
応用事例紹介ページには重要な注記がある。「これらの事例は過去にサービスとして実施されたものや実験用システムとして試作されたものであり、現時点で実サービスとして提供されているものではありません」。つまり、以下に挙げる事例は現行の常設サービスではなく、試作・実証段階のものとして扱う必要がある。
- ニュース速報手話CG: 日本語のニュース速報を手話に翻訳し、手話CGアニメーションを自動生成するシステムを試作。速報翻訳に特化した手話翻訳AIと、手話の提示位置・口型を自動制御する技術を研究
- スポーツ手話CG: 試合中の競技データから手話CG・字幕をリアルタイム生成し、競技映像とともにWebページで提示するシステムを試作。反則情報を使ったルール解説のプッシュ通知や、見逃し視聴時にイベント単位で視聴開始位置を選べる機能を備え、国際的なスポーツ競技大会でサービスとして実施された
- 運行情報手話CG: 聴覚障害のある人向けに、文字だけでなく手話でも鉄道の運行情報を提供するシステムの実証実験。首都圏新都市鉄道(つくばエクスプレス)・筑波技術大学・NHK・JR東日本アイステイションズの4社の連携協定に基づき、2024年11月15日から2025年11月30日まで実施されている
このほか、研究紹介サイトの「関連リンクページ」を確認すると、手話CGを含むNHKの手話関連コンテンツは次の7つが並んでいた。
| サービス名 | 位置づけ |
|---|---|
| NHK ONE 天気防災手話CGサイト | 気象・防災情報を手話CGで提供 |
| NHK ONE 災害時障害者のためのサイト | 災害時に障害のある人向けの情報提供 |
| NHK ONE NHK手話ニュース | 定時の手話ニュース番組 |
| NHK ONE NHK手話ニュース845 | 手話ニュースの別時間帯版 |
| NHK ONE ハートネット | 福祉全般を扱う番組・サイト |
| NHK ONE こども手話ウイークリー | 子ども向けの手話コンテンツ |
| NHK ONE ワンポイント手話 | 手話の学習コンテンツ |
このうち「天気防災手話CGサイト」は、本記事が「定型文方式」の解説で参照した気象情報の自動生成技術と直結するサービスとみられ、気象・防災分野では既にCG生成技術が実サイトとして公開されている。一方、手話ニュース・ハートネット・こども向けコンテンツなどは、人による手話通訳が主体と考えられ、手話CG研究サイトからリンクされているからといって、これらすべてにCG技術が使われているとは限らない(本記事ではリンク先の各サイトを個別に開いて技術的な裏付けまでは確認していない)。
まだ解けていない課題
研究紹介ページは、手話CG技術の課題を率直に記している。手話は「手指動作」と「非手指動作」(うなずき・表情・口型など)が単語・文脈に応じて連携して動くことで意味を伝える言語であり、同じ手の形・動きでも文脈や前後の単語の影響で意味が変わりうる。この非手指動作を含めて包括的に表現できる表記法(中間表現)がまだ確立されておらず、蓄積した手話モーションデータを状況に応じて柔軟に変形して使うことも今のところできていない、とサイトは明記している。「任意の日本語文を翻訳して手話CGを生成する」ことを目標に、要素技術の研究を継続中という位置づけだ。
学会論文3本は書誌情報のみ、本文までは読んでいない
- 本記事はNHK放送技術研究所の手話CG研究紹介サイト(トップ・手話CGとは・研究紹介・応用事例紹介の各ページ)と、そこからリンクされる学会論文3本のJ-STAGE書誌情報ページを実際に読んで書いている
- 学会論文3本については、タイトル・掲載誌・巻号というJ-STAGE上の書誌情報のみ確認しており、本文(実験条件・評価結果の詳細な数値等)までは読んでいない。アクセス制限(購読・会員限定)の有無も含め、本記事では確認していない
- 応用事例の多くは「過去に実施」「試作」段階であり、常設の実サービスとして現在提供されているかどうかは事例ごとに確認が必要(つくばエクスプレスの実証実験は2025年11月30日で終了予定と明記されている)
- 手話CGの生成品質・実際の手話話者からの評価(読み取りやすさ等)についての定量的なデータは、今回確認した各ページの範囲では見当たらなかった
- 「手話に関する施策の推進に関する法律」については、NHKサイトが名称を挙げているのを確認したのみで、条文・公布日・施行日そのものは本記事では確認していない
- 関連リンクページに並ぶ7サービスのうち、実際に手話CG技術が使われているのは「天気防災手話CGサイト」(研究紹介ページの記述と直接対応)である可能性が高いと本記事では推測したが、他の6サービス(手話ニュース等)を個別に開いて技術の裏付けを確認する作業は行っていない
関連記事
出典・参照資料
AIニュースの解説を動画でも
YouTubeでは注目ニュースの背景を解説し、Xでは新着記事をお知らせしています。
コメント
まだコメントはありません。最初のコメントを書いてみませんか?
AIについて聞きたいことはありますか?
質問箱で無料で受け付けています。回答は公開され、他の方の参考にもなります。
質問箱を見る →新しい記事をメールで受け取る
AIの新しい発表を、出典付きで整理して届けます。