Discord版からWEB版へ、使用のハードルも下がったので早速検証してみた
実写からアニメーションを生成するDomoAI
今年初めくらいに１度Discord版で使用した経験はありましたが、それ以来、特に気にする事なく他のサービスに注力をしてましたがWEB版が登場したとの情報を得て久しぶりにアクセスしてトライアルで使用。
あれっ！結構使えるな・・・といった印象でいたところ、知り合いのプロデューサーより「実写をアニメ風に加工できるかな？」といった相談がタイミング良く舞い込んできました。が、しかし、トライアルで使った経験しかなかったので、有料版に加入し数タイプの検証を開始。
実際に登場する女性タレントさんの簡単なアクション動画を送付いただき、サンプルを作成して確認してもらった結果、GO！が出たので早速着手しました。
使用したソフト
- Domo.AI （WEB版/実写タレント動画のアニメーション化）
- Midjourney（背景画像）
- Gen2（背景アニメーション）
- Photoshop（レタッチ）
- Adobe After effects/PremierePro（合成・マスタリング）
① Domo.AIにアクセス
WEB版の使い方は至って簡単。直感的に進められます。ただしトライアル版は４秒動画を１回作成すると終わりなので、有料版への加入をおすすめします。
機能として、以下の４つ
・ビデオをアニメなど他のスタイルに変換
・静止画を動画へ変換
・テキストから静止画を作成
・静止画をアニメーションに変換
今回は「ビデオをアニメなどの他のスタイルに変換」で作業
手順は至って簡単
（１）センターの大きソースモニターの変換したい動画をインポート。
左の欄の上部より
（２）プロンプトを入力 実写のイメージを簡潔に入力するレベルでOK
例えば「白い服をきた女性が踊る」 日本語でもOKです
（３）アニメのスタイルを選択（十種類以上のスタイルがあります）
（４）秒数設定（３秒 ５秒 １０秒 ２０秒）
（５）参考動画等があればインポート（今回は使用してません）
（６）アスペクト設定（16:9 9:16. 1:1 自動）
（７）詳細設定 背景を活かすかor単色のカラーにするか（クロマキー合成）やウォーターマーク（透かし）の有無などの設定が可能
（８）上記を設定した後、生成ボタンをクリック
設定にもよりますが、５〜２０分程度で生成されます。
② 実写からアニメーションへ変換
先方から送られてきた、グリーンバックの
女性タレントの動画をインポート。
収録のグリーンバック素材で行う検証はしていなかったので、まずは背景をそのままにして「Anime V1」で生成したところ、使い所になりそうな部分の目が閉じているなど物理的理由からスタイルはNG、合成の抜きはいけそうと判断。
再度、スタイルを変更して生成。
スタイルをIllustrationに変更し、今度は背景をグリーン設定で生成した結果、
抜けも良好、使い所の目の閉じは解決したのだが、
別の問題が発生。
・動き途中に、片腕が消えたり、一部が抜けてしまうコマが数箇所発生
因みに、書き出しはハーフHD＿２４コマ/MP４です
とりあえず、この素材をベースに補正を加えることを前提に使用を決める
③ 欠損したコマの修正
・抜きのアニメーション素材からまずは欠損されたコマとその前後のコマを静止画で書き出す
・Photoshopで、前後のコマを活用して欠損部分を補足したり、塗り足しで補い、再びPremiereに読み込み、上段のレイヤーに配置。
再生して確認、問題ないのでこの作業を終える
④ コンポジット
