はじめに

企画に参加いただきありがとうございます！
今回は商品を入力するとAIアバターが商品紹介をしてくれるアプリを共有します。

紹介したい商品画像を入力するだけでTikTokのUGCで見られるような商品紹介動画が完成します。

NanoBananaやSeedanceなどの登場でよく見ないと本物なのか人間なのか分からないレベルの人物画像を生成できるようになりました。
これの登場のおかげで自然なアバター動画を作成することができるようになりました。

音声などはまだ発展途上で年内にはかなり自然で違和感のないレベルの音声が簡単に生成できるようになっているかもしれません。（既にかなり自然な領域に来ていますが…）

ワークフロー配布

今回のワークフローは下記のファイルをご自身の環境にコピーしてからご利用いただけます。

✅ 事前準備①：自身のディレクトリにGoogle Colabファイルをコピー

リンク先を開くと左上に「ファイル」というタブが表示されているのでカーソルを合わせて「ドライブにコピーを保存」を押してください。
ご自身の環境にファイルが複製されるのでそちらで実行をしてください。
ご自身の環境であれば変更を保存したりAPIキーを設定して他者にシークレットキーなど漏洩することなく実行可能です。

✅ 事前準備②：APIキーの取得

• Gemini API（Vertex API）：テキスト生成・画像生成

• Elevenlabs API：音声生成

• HeyGen API：映像生成

セルを実行する時に入力を求められるのでそれぞれのキーをコピペするとOKです。あなたの環境で環境変数として設定されます。

使い方：

• 商品紹介として使いたい画像とアバター画像を用意する

• Google Colabの上から順番に実行（Run）していく。

  • 「Shift」+「Enter」で実行したり、各コードブロックの左にある「再生ボタン」を押すことで順番に実行ができます。

  • ※ Free Tierで実行できるバージョンはPhoto Avatarという方式の映像精鋭を活用しており、身振り手振りの動作が弱いです。Proプラン以上で利用できるAPIの Avatar IV のAPIだと表現豊かな商品紹介動画として作成可能です。

  • もし反響があれば Avatar IV APIを組み込んだアプリを公開するかもしれません！

終わりに

企画へのご参加ありがとうございました！
「音声」「映像」はAPIを別のモデル変えることでさらに自然なUGC動画に仕上げることも可能です。（セットアップコストや実行コストとのトレードオフ感はありますが）

今後もどんどんAIと動画の研究と知見のシェアします。
引き続きよろしくお願いします！

おまけ
現在調査して公開を考えているテーマの例をご紹介します。
動画AIの研究をしていて個人的にアツいと思って目をつけているネタでもあります。

• 【スライドの動画化】ManusやGensparkスライドから直接解説動画に変換するワークフロー

• 【縦型切り抜きの自動化】横型動画を入力すると最適な縦型に切り抜きするワークフロー

• 【LP自動作成】参考LPのURLを入力するとデザインを再現したLPを作成できるAIエージェントシステム

• …[他にもネタご共有募集中です！]

他にも「こんなワークフロー作ってほしい！」「こういうことってできないの？」などの相談がありましたらXのDMなどでお気軽にご質問ください。今だけ完全無料で相談や回答いたします。

👇 こちらからご連絡お待ちしています 👇