iPhoneで動画を別の言語に吹き替える方法

吹き替えは、動画で話されている内容を別の言語の音声に置き換えることです。少し前までは声優を雇う必要がありました。今ではアプリが話し言葉を翻訳し、スマホの中で新しい音声トラックを作れます。

このガイドでは、私たちが作っているiPhoneアプリのCapCapを使います。

仕組み

CapCapは動画の話し言葉を文字起こしし、その文章を翻訳してから、翻訳を読み上げる音声を1文ずつ生成します。新しい言語の吹き替え音声と、それに合った字幕が手に入ります。

ステップ1：プロジェクトを作る

CapCapを開き、新しいプロジェクトをタップして、写真から動画を選びます。

ステップ2：言語と出力を選ぶ

• ビデオ言語：動画で話されている言語。
• 翻訳言語：吹き替えたい言語。
• 出力モード：音声 + 字幕を翻訳を選びます。

ステップ3：声を選ぶ

音声では3種類から選べます。

• 自動は、動画から検出した声をもとに、話者に合う声を選びます。
• オリジナル音声は、話者自身の声をもとにした声で吹き替えるので、本人の声に近いままです。
• 自分で音声モデルを選ぶこともできます。再生ボタンをタップすると、選ぶ前に試聴できます。

ステップ4：文字起こしと吹き替え

今すぐ転写をタップします。終わったら動画を最初から再生して、全体を一度聞いてください。

ステップ5：確認して書き出す

音声を聞きながら翻訳された字幕を読み、人名や数字が正しく訳されているか確認します。問題なければ、エクスポートをタップしてから動画を写真アプリに保存をタップします。

より良い結果を得るコツ

話している人が1人で、はっきり話している動画から始めてください。背景の雑音、人が重なって話す場面、大きな音楽は、どれも文字起こしの精度を下げます。吹き替えの品質は、文字起こしの品質を超えられません。

話すスピードにも注意してください。同じ内容を言うのに、言語によって必要な単語の数が違います。そのため、吹き替えの声が元の場面の長さを超えてしまうことがあります。

新しい言語での最初の数本は、投稿前にその言語を話せる人に見てもらうと安心です。

できないこと

CapCapが変えるのは音声だけで、映像は変えません。話す人の口の動きを新しい言語に合わせることはないので、人物のアップの映像は、よく見る人には口と音がずれて見えます。吹き替えは、ナレーション、チュートリアル、製品デモ、話す人が画面の大部分を占めない動画で最も効果があります。

自分の声を残したい場合は、翻訳字幕という方法もあります。