【Weverse】ライブ配信時の字幕の違い【人力とAI】

そうだ字幕の話をしよう

転役して半年、BTSバンタンからのライブ配信も増えましたね！
そこで気になるのが字幕です。ええ、私は字幕が大好きですとも( *´艸｀)
最近Xで呟いてみたら意外と知らない人も多かったので、ここでまとめてみたいと思います！

「字幕が好き」ってどれくらい？

元々、文章の読み書きや翻訳界隈の話が好きなんです。韓国人スターを推すことでそれが加速し、「字幕」に興味を持つようになりました。

映画の場合だと、事前にTeaserを全部見て内容を把握し、映画を見て覚えた字幕を再現として書き起こし、後日VODで見直して比較しています。
ライブストリーミング字幕も、頭の中で「昨日と同じ文章だから、おそらくここまでがMC台本」「ここが今日のアドリブ」と切り分けながら読んでいます。

字幕を読むことで見えてくる「構造」を理解することで、別角度からバンタンを取り巻く世界を推察できるところが、とても面白いと思っています。

字幕の種類

基本、人力とAI生成の2種類です。
過去には「ファンサブ」という、ファンが直接字幕を付けられるスーパー仕様があったっぽいのですが、今は当時ついたファンサブを見られるだけで、自分でつけることはできないと思われます。

CCマークに注意しよう

Weverseの場合「CC」は字幕の目印になっており、字幕がついてる動画にはCCマークがついてます。
Weverseでライブストリーミングを見る場合、画面右下に「CC」って出るから、それを押して日本語設定に切り替えてください。

本来だと聴覚が不自由な人用に状況説明も補った字幕のことで、話者名が出てたりと情報が多めになっているので、日本語訳だけだと意味が分からない場合はそれを優先して見に行くとわかりやすいです。

人力字幕（誰でも見られる）

主に人が聞いて翻訳して入力しています（ハイブリットパターンは記事下部参照）。公演のライブストリーミング時の字幕も、おそらく同様です。

1. 翻訳者確保のため、事前予約が必要

2. ライブ配信終了後、修正してもう一回アップされるので、それまで字幕がなくなる

3. 文脈理解は強く、時々すごい頑張ってる様子が窺えてスリリング

②の場合、いつアップロードされるのか予告や通知がないので、待ってる間は日参してしまいますね。

でもカオスかわいいバンタンの会話を翻訳する苦労は、計り知れません。
下手すると株価下がるしARMYは突撃してくるし。翻訳者さん、ファイティン！

AI字幕（Digital Membership専用）

2025年1月に実装された機能。この緑ハートみたいなアイコンが、メンバーシップ特典の目印です。

1. 突発ライブ配信の時はこれ

2. ライブ配信終了後もAI字幕が見られる

3. 後から人力字幕が追加されることもある

4. 開始前に設定した言語と違う言語を話すと、正しく訳せないのが弱点

ちなみに、私はDigital Membershipに入っているので、入っていない場合の見た目がわかりません。何か違ったらコメントで教えてください！

④を補足しますと、Weverseの自動翻訳は基本的に1言語対応っぽく、ライブ配信を始める前に基本言語を設定して、それに対する翻訳字幕を自動生成していくようです。

だから、韓国語で喋ってる中に曲名やツアー名などの英単語を混ぜると、それを似た音の韓国語に訳そうとし、かつそれを日本語へ訳すため、おかしくなっているように見えます。少しマシになった気はしますが……。
ナムさんがライブ配信中に英語で喋ってくれたような場合だと、字幕が出ないことが多いです。

Weverse Companyは、所属アーティストに「AI字幕を意識した話し方」をレクチャーし、各アーティストごとに曲名などを編集した翻訳用の用語集（Glossary）を対応言語分用意していただけると嬉しいです。
そして私たちにも、その用語集をお売りください。「三方良し」の精神で、もっと商売心を発揮して！！

ちなみに、最近の願いは「兵役中の話拾える通訳さんを入れて、字幕に注釈つけてほしい」です……( ;∀;)ﾜｶﾝﾅｲ
通訳は女性の方が大半なのですが、韓国の兵役は男性限定なので、軍用語はよくそのままカタカナ訳出されてて難しいなと思います💦

ついでにYouTubeの字幕設定の話

YouTubeでも、「動画の詳細」で個別に言語が設定できます。最近作った動画を題材に、設定を見てみましょう。

「動画の言語＝自動生成に対応する言語」なので、ここの設定が合ってないと自動生成される字幕がおかしくなります。
例えば動画を英語で作ってるのに「動画の言語」が日本語だと、ちゃんと自動生成が動かず、自動生成言語からの自動翻訳も役に立ちません( ;∀;)

字幕は手動追加できます。ここで追加した字幕は、動画の字幕設定や文字起こしに反映されます。
何も設定してない場合は自動字幕だけになりますが、この機能が追加される前にアップして放置している動画の場合、それすらなくて死にます(T_T)

一期一会のライブ字幕

字幕は、映像とは別の著作物です。翻訳権もあるので、字幕データは映像とは別で取り扱われていると思われ、プラットフォームによって違いが出ます。
公演映画の場合だと、おそらく以下の種類+αの字幕があります。

1. ライブストリーミングとディレイ

2. 映画のTeaser字幕（配信元によって違う）

3. 映画

4. VODや円盤

ライブストリーミング中の字幕はVODや円盤になると差し替えられるので、一期一会です。広く言うと映画館で見る字幕もそうです。
結構違うのが②で、ものによっては「俺」「僕」の一人称も違うので、大分イメージが変化します。これはこれで味がありますが。

以下の話は、後から別媒体で見直した場合はもう修正されてる可能性が高い、ということを念頭に置いてお読みください。

字幕職人さん、ファイティン！！

ホビとジン君のソロツアーを見ていると、基本台本があり、そこにアドリブが入っているのがわかります。普通に全部打ち込んでたら間に合わないので、貰える原稿は先にもらってると思われます。

例えばタルソクツアーのミニゲーム説明だと、ジン君もスクリプターを読み上げてますし、翻訳さんも同じ原稿を共有してるんじゃないかと予想します。

タルソクツアーの初日での場合だと、バンドメンバー紹介の時にギターさん以外のお名前が出ていなかったのですが、翌日はちゃんと表示されていました。
ホビソロツアーのライブストリーミングではそういう事故はなかったんで、以下のように予想した次第です。

人名は聞き取りと表記が難しいので事前資料が重要なのですが、それがないと事故ります。できたらホビが呼んでるのに合わせてほしい～。

「リアルタイム字幕」のトレンド

調べてみたところ、最近は人力字幕でもAIがサポートするハイブリッドシステムが多いらしいです。

• 音声認識

  • AIがアーティスト発言を拾って字幕を自動生成→人が修正

  • 人がアーティスト発言を拾って口で翻訳→AIが字幕生成

• 自動翻訳

  • 人＋AIでキー言語字幕を生成→AIが他言語字幕を生成

    • 例えば英語を先頭ランナーにして、そこからヨーロッパ言語へ引き継いでいくなどの、文法的に近い言語ファミリーによるリレー翻訳

みたいなパターンを使う、もしくは組み合わせて利用しているケースもありました。

グローバルスター、かつ韓国語話者であるバンタンと付き合うには、翻訳技術の発達が必須です。
翻訳技術は英語ベースになってることも多いので、韓国語⇔日本語の自動翻訳だと不自然な表現になってしまうこともしばしばあり、もどかしい思いをさせられます。
ARMYもラーニング頑張りますので、技術も早く発達しますように！！

字幕大好き！

字幕には夢とロマンがあります。国というか言語によって訳し方が変わっていくのも、文化差を感じてわりと好きです。多少過不足があろうと、自力で英韓字幕を読みに行けばよし！

リアルタイム翻訳を流してくれるアカウントさんには、いつも助けられています。
日本語字幕動画作成ARMYのスキルも凄いですよね。あの、クロスしてる話題の丁寧な拾い上げや、顔文字や文字色を使った発言者把握のしやすさは、是非公式でも取り入れてほしいところです( ;∀;)

字幕は長いお友達。
末永くお付き合いするシステムなので、どんなふうになってるのかちょっと知っておくと、各種コンテンツを見る際も楽しみが増えていいのではないでしょうか。お勧めです！

関連記事