邦画を日本語字幕付きで見る、と聞くと、少し不思議に感じるかもしれません。台詞はもともと日本語で、聞こえる人にとって字幕は要らないからです。ところが劇場の上映スケジュールには、ときどき「日本語字幕付き上映」という回があります。そこで流れる字幕には、台詞のほかに「(ドアが閉まる音)」や「♪(不穏な音楽)」といった、音そのものを説明する行が混ざっています。

洋画の字幕を見慣れた人ほど、この行に戸惑うはずです。翻訳字幕には、こうした行はまず出てきません。同じ「字幕」でも、何を文字にするかの前提が違うのです。

バリアフリー字幕とは、聞こえない人に音の情報を渡す字幕

バリアフリー字幕とは、耳の聞こえない人や聞こえにくい人が、聞こえる人と同じ情報を受け取れるように作られた字幕のことです。台詞だけでなく、誰が話しているのか、どんな音が鳴っているのか、どんな音楽が流れているのかも文字にします。

洋画の翻訳字幕との違いは、前提にしている観客にあります。翻訳字幕は、音は聞こえるが言葉がわからない観客のための字幕です。足音も音楽も聞こえているので、文字にするのは台詞の意味だけで足ります。声色で話者がわかるので、誰の台詞かも書きません。バリアフリー字幕は、その「聞こえているから書かなくてよかった部分」を全部書き起こす字幕です。

テレビの字幕放送も、聴覚障害者のための字幕という点では同じ目的を持っています。違いが出るのは届け方です。放送の字幕は受信機が画面に重ねる方式で、視聴者がリモコンで出し入れできます。映画館のスクリーンには、そうした切り替えの仕組みがありません。

話者名、音、音楽をどう書くか

同じ場面について、翻訳字幕では台詞だけが出るのに対し、バリアフリー字幕では話者名、効果音、音楽の説明も文字になることを比べた図

書き方には、国内で広く使われてきた慣習があります。細部は制作会社や配給会社ごとに違い、統一された規格があるわけではありません。それでも、多くの作品で次のような書き分けが見られます。

  • 話者名を、台詞の頭に丸括弧で添える。画面に映っていない人の声や電話の声もここで示す
  • 効果音や環境音を、角括弧や丸括弧で台詞と区別して書く
  • 音楽を音符の記号で示し、曲調や歌詞を添える

ドアが閉まる音を書くかどうかは、その音が物語に関わるかで決まります。背後でドアが閉まり、登場人物が振り返る場面なら、音を書かないと振り返った理由がわかりません。ただの生活音なら書かないこともあります。音楽も同じで、曲名より「不穏な」「軽快な」といった曲調のほうが、場面の意味を伝えることがあります。

ここで難しいのは、書き足すほど読む量が増えることです。字幕は画面に出ている間に読み切れなければ意味がありません。台詞の多い場面に話者名と効果音を全部足すと、字幕は読める速さを超えてしまいます。何を書いて何を省くかの取捨選択が、バリアフリー字幕の仕事の中心です。

バリアフリー上映は、字幕を手元に届ける方式が増えた

上映中の音声をスマートフォンのマイクで拾って本編データと照合し、字幕を専用メガネや端末に、音声ガイドをイヤホンに届ける仕組みの図

映画館で字幕付きの回を設ける方法は、字幕を映像に焼き込んでスクリーンに映すやり方が基本でした。いわゆるオープンキャプションです。ただ、全員が字幕付きの映像を見ることになるので、上映できる回は限られます。日に数回しか上映がない作品で、そのうちの1回を字幕付きにすると、字幕を必要としない観客の選択肢が減るからです。

この制約を外したのが、観客が手元の端末で字幕を見る方式です。国内では「HELLO! MOVIE」や「UDCast」といったアプリが使われています。仕組みは似ていて、スマートフォンのマイクが上映中の音声を拾い、あらかじめ解析しておいた本編の音声データと照らし合わせて、今どの場面かを判断します。場面がわかれば、それに合った字幕を表示できます。途中から入場しても場面に追いつけるのは、このためです。

字幕の表示先は、スマートフォンやタブレットの画面のほか、専用のメガネ型の端末に対応しているものもあります。メガネ型なら、スクリーンから目を離さずに字幕を読めます。映画館側に特別な設備がなくても、通常の上映回のまま字幕と音声ガイドを届けられるのが、この方式の利点です。

同じアプリで届けられるもう一つのサービスが、目の見えない人や見えにくい人のための音声ガイドです。場面の様子や登場人物の動きを、台詞の合間にナレーションで説明します。テレビでいう解説放送の映画版で、観客はイヤホンで聞きます。上映スケジュールに「バリアフリー上映」とある回は、字幕と音声ガイドのどちらか、または両方に対応していることを示しています。

バリアフリー字幕の作り方と、手間のかかる場所

字幕を作る工程は、おおむね次の順に進みます。

  • 台詞を書き起こし、どの時点で表示するかのタイミングを付ける
  • 台詞ごとに話者を割り当てる
  • 物語に関わる効果音と音楽を拾い出し、書き方を決める
  • 読む速さに収まるよう、行を割り、言い回しを削る
  • 聴覚障害のある当事者に見てもらい、伝わり方を確かめる

一つめと二つめは、いまでは機械の助けを借りやすい工程です。音声認識による書き起こしは実用の水準にあり、話者分離の技術を使えば、誰がいつ話したかの下書きも作れます。

残りの三つは、人の判断が中心になります。どの音が物語に関わるのか、どの言い回しなら削っても意味が変わらないのかは、作品を理解していないと決められません。当事者による確認も、作り手には気づけない読みにくさを拾うために欠かせない工程です。映画やドラマの配信サービスでも「CC」や「聴覚障害者向け」と表示された字幕が増えていますが、作り方の中身は同じです。

NAXAの取り組み

NAXAは、AI字幕生成サービス「Subtitle Generator」を開発・提供しています。日本語に特化した音声認識エンジンによる文字起こしとタイムコード付けに加えて、話者の認識やルビ振り、字幕の配置までを自動化し、各局の制作ルールに合わせて調整したうえで提供しています。

書き起こしと話者の割り当てを機械が下書きすれば、人は音の取捨選択と読みやすさの調整、当事者との確認に時間を使えます。バリアフリー字幕でいちばん人の判断が要るのは、まさにその部分です。

字幕付きの上映回を探して、時間が合わずにあきらめた観客は少なくないはずです。手元の端末で見る方式が広がった今、残っているのは字幕そのものを用意できる作品の数です。公開される邦画のうち、どれだけに字幕を付けられるでしょうか。