Autosub Studioとは？
Autosub Studioは、中国語の動画をベトナム語（または英語）字幕とAI吹き替え付きの動画に変換するデスクトップアプリです。リンクを貼り付けるかファイルをアップロードするだけで、動画のダウンロード、字幕の抽出、翻訳、吹き替え、完成動画の書き出しまでを一つの流れで行います。処理はすべてお使いのパソコン上で実行され、インターネット接続が必要なのはAI翻訳モデルと一部のオンライン音声だけです。
自動化された5ステップ
- ダウンロード：Douyin、TikTok、YouTube、Bilibili（BV/av番号にも対応）、または.mp4の直接リンクから取得。Douyin/TikTokの動画はロゴなしで保存できます。
- 字幕の抽出：画面に焼き込まれた文字を読み取るOCR（RapidOCR + OpenCV）、話者分離付きのSenseVoice音声認識、または既存の.SRT/.TXTファイルの読み込みに対応。
- AI翻訳：1つ目のエージェントがセリフとぼかすべき文字を判別し、2つ目のエージェントが翻訳して登場人物ごとに声を割り当てます。プロンプトはベトナム語の呼称や、啊（a）・呢（ne）・吧（ba）などの中国語の語気助詞に合わせて調整されています。
- 吹き替え：VieNeu-TTS（北部・中部・南部の3地方にわたる20種類のベトナム語音声、ボイスクローン対応）、Kokoro-82M（9言語・54音声）、Edge-TTS、Gemini TTSから選択。話者ごとに自動で別の声が割り当てられます。
- レンダリング：元の字幕をぼかして新しい字幕を焼き込むか、中国語字幕を残して二言語字幕動画を作成。透かしの追加とサムネイル生成も自動で行います。
主な機能
- CapCut風のビジュアル字幕エディター：字幕の位置をドラッグで調整し、行の分割・結合を行い、確認してから書き出し。
- AIモデルを自由に選択：Gemini、OpenAI、xAI Grok、またはOllama・vLLM・DeepSeekなどの互換エンドポイント。素早い下訳にはGoogle翻訳も使えます。
- プロンプトマネージャー：武侠・仙侠ドラマ向けの呼称や漢越語などの翻訳コンテキストをプリセットとして保存。
- バックグラウンドキュー：同時処理数を設定でき、チャンネル・再生リストごとに管理。
- チャンネル監視：Bilibili/Douyinのチャンネルを15/30/60分ごとに確認し、新着動画を自動ダウンロード。
- Telegramボットで操作：スマートフォンからリンクの追加、キューの確認、統計の閲覧が可能。
- 単体の音声ツール：テキストや字幕ファイルをタイミングの合った音声に変換。
中国語学習者にも便利
二言語モードでは元の漢字字幕を残したまま下にベトナム語の字幕を追加できるので、好きな中国語のドラマやVlog、ニュースから自分だけのリスニング教材を作り、意味を確かめながら視聴できます。
インストールと動作環境
- macOS 13以降（署名済みDMG）とLinux（.debパッケージ）に対応。Windows版は未提供です。
- 初回起動時にNode.js、Python、FFmpeg、MongoDBを自動でダウンロード・インストールするため、手動での準備は不要です。
- SenseVoice音声認識とKokoro音声はApple Silicon搭載Macが必要です。
- ライセンスキーで有効化します。1つのキーは同時に1台で使用でき、別のパソコンへ移行することもできます。
まとめ
Autosub Studioは、中国語動画のダウンロード、字幕抽出、翻訳、吹き替え、レンダリングまでの工程を、お使いのパソコンで動く一つのアプリにまとめました。ドラマのローカライズを行うクリエイターにも、自分だけの二言語動画を作りたい学習者にも適しています。
