LEANSYSTEM - AIでVtuber風オリジナルアバター作成

AIでVtuber風オリジナルアバター作成

弊社（LEANSYSTEM）では、積極的にAIをWeb制作やシステム開発などに活用しています。この記事では、Blenderアドオン作成動画に使用したVtuber風のキャラクターを作成した手順をご紹介していきます。

サービス紹介動画を作成したい

AIを活用した事例を紹介するにあたって、サービス紹介動画を作成することになりました。

早速結果から報告しますと、以下のような動画を作成することができました。

今回紹介動画を作成するにあたって、

何かAIを使って動画を作れないか？
Adobeよりも手軽で動画編集の知識がなくても使いやすい・編集しやすい動画編集サービスはないか？

ということをお題にして作成しました。

使用したAI技術とサービスの紹介

今回使用したのは

です。それぞれのサービス・AIの特徴を簡潔に紹介していきます。

＜Claude.ai＞

対話形式で利用できるLLM（大規模言語モデル）。他にもChatGPTやGeminiなどがありますが、色々なAIを試してみて、日本語の文章作成・会話などはClaude.aiが一番表現豊かで、人間味があります。

＜Adobe Firefly＞

生成したものを著作権フリーで利用できる画像生成AIです。

＜Live Portrait Monitor＞

グラフィックカードを搭載したパソコンで、カメラに向かって話している動画から用意した画像へ、口の動きを転写し、動画生成てくれるAI技術です。

＜FlexClip＞

直感的な操作で、動きのあるリッチな動画を作成できるサービスです。Chromeなどのブラウザ上で操作ができます。

＜AdobePremire＞

Adobe製品の動画編集ソフトです。Live Portrait Monitorで作成した映像をグリーンバックにし、音声を編集する際に使いました。他の動画編集ソフトでも代用可能です。

調査・作成手順

＜動画編集ソフトの選定＞

動画を作成するにあたって、一番重要な動画編集ソフト・サービスをまず、AIを用いて、簡単に作れるサービスはないか調査しました。

現状、半自動的に動画を作成してくれるサービスを見つけることはできませんでしたが、FlexClipは比較的簡単な操作方法で細かくリッチな動画を作成できるので採用しました。

2024年8月時点ではリリースされていませんが、Geminiを利用した動画編集サービスGoogleVidsも今後期待です。

＜動画の文章をAIで生成＞

次に動画で話す内容をClaude.aiで作成しました。もとになる記事をAIに読み込ませ「解説動画を作成したいです。この記事の全体のカンペ・プロットを作ってください」と指示をしました。
しかし、この指示だと、動画の流れ・要約ものしか出てこないため、次に「具体的に口頭でしゃべる内容を一つ一つ作ってください」と指示をすることで動画用の文章ができました。

＜キャラクターに喋らせたい＞

動画は顔出しはしません。そのため自分の代わりにキャラクターが動いてしゃべることを簡単に実現できないか調査しました。すると自分を撮影した映像をもとに、画像の人物を動かすことができるLive Portrait Monitorというものを見つけました。

＜動画用のキャラ作成＞

次に行ったのが、キャラの作成。Adobe Fireflyは著作権フリーで画像生成ができるため、そこでRobot＋人のプロンプトで以下のキャラクターを生成しました。

＜プレスコ用音声を作成し、自撮り＞

Live Portrait Monitorのための動画の用意です。トークは苦手で、なかなか噛まずに一発で動画を撮影することは難しいので、プレスコで行うことにしました。先にプロットを読み上げた音声を作成し、その後、音声に合わせてしゃべっているように口パクで自撮りしました。その後、その口パク動画をLive Portrait Monitorへ読み込ませ、上のキャラが口を動かしている動画ができました。

＜動画と音声の合成＞

AdobePremireで、Live Portrait Monitorで作成した動画をグリーンバックにし、音声と合成し、キャラクターがしゃべっている動画を作りました。

＜動画の最終仕上げ＞

FlexClipを使い、キャラクターの動画の背景を切り抜き、文章や図形、エフェクトなどを使い、動画完成に向けて編集していきます。このFlexClip、本当に簡単に動画編集を行えました。矢印やスクリーンショットなどの出て消えるアニメーションなどは簡単に付けられ、すでに動くオブジェクトや図形なども豊富にあり、簡単に動画の完成度を高めてくれます。

そして、動画が出来上がったらエクスポートし、Youtubeへアップロード。以上が、今回動画制作の流れでした。

いかがでしたでしょうか？結構動画完成までは手間暇かかっていますが、AIやFlexClipを使用すれば従来に比べて比較的簡単にリッチな動画を作成することができます。

興味を持たれた方はぜひチャレンジしてみてください。

ぜひご相談ください

サービス・製品紹介動画を作りたいけど、それぞれのサービス・AI技術の使い方がわからない方・・・など、思ったことはありませんか？

お困りごとがありましたら、ぜひLINEよりLEANSYSTEMへお気軽にお問い合わせください。

弊社が制作のお手伝いいたします。

＜代行費用＞

1時間5000円で代行いたします。
初回2時間の代行・ご相談は無料です。

私たちは日本と世界の全ての子どもたちが
希望と未来と愛に満たされることを
目標にIT活動を命をかけて実施します。

あらゆる違い、言語、文化、宗教、貧富の差を越えた学び場づくり、
世界を育てる人材の育成と支援の
研究開発と普及と実践を行います。