K-POPコンサートをリアルタイムで翻訳する方法

コンサートは汎用翻訳機にとって最悪の環境です。大音量の音楽、観客のノイズ、声の重なり、そしてアイドル名やファンダム名、スラングだらけの語彙——汎用モデルはこれらを意味不明な言葉に変えてしまいます。メンバーの名前が色の単語になり、ファンダム名が日用品の名前になってしまうのです。

Echoはまさにこのケースのために作られました。K-POP用語集は約770の名前と用語をそのまま保持し、音声処理パイプラインはクリーンなスタジオ音声ではなくライブ音声に合わせて調整されています。

Around MeモードはiPhoneのマイクを使って会場の音を聞き取ります。座席からPAアナウンスと、会場の音響システムを通じて流れるアイドルのマイク音声を拾い、発言と同時に字幕を表示します。

実用的なコツを2つ：スマホはポケットにしまわず手元に出しておく（マイクが音を拾いやすくするため）、そしてフローティングオーバーレイを有効にしておけば、曲の間カメラに切り替えても字幕は画面に残ります。

配信される公演（たいていソウルか東京）では、どのデバイスでも配信を再生してEchoに聞かせるか、ピクチャーインピクチャーのオーバーレイで同じiPhone上に両方を表示させましょう。字幕はメントが行われた瞬間に英語、簡体字中国語、繁体字中国語で表示されます。3日後にVODで見る必要はありません。

無料プランでは1日5分使えます——本番前にハイライトクリップで試すには十分です。コンサートは2〜3時間なので、多くのファンは2つの選択肢のどちらかを選びます。デイパス（24時間有効の一回限り90分、サブスクではありません）か、Echo Plus Weekly（3日間無料トライアル付きで、コンサート週末全体をカバー）です。