Dwango Media Village(ドワンゴメディアヴィレッジ,dmv)

1枚のキャラクタ正面画像からのアニメーション生成

デモの操作例

デモの使い方

4つの手順で、好きなキャラクタ画像のアニメーション動画を生成することができます!

  1. キャラクタを選択します。
  2. 背景を選択します。
  3. キャラクタの顔の位置をみほんにならって調整します。
  4. 『TalkingHead!』ボタンを押します。

3番目の位置合わせは、クリックでロードした画像の移動、ホイールか上部のスライダーで拡大縮小を行います。モバイル端末上では、それぞれの操作がスワイプおよび、ピンチイン/ピンチアウトで対応しています。デフォルトで選択できるキャラクタはあらかじめ適切な位置に調整されているため、位置調整は不要です。

10~60秒ほどで、入力したキャラクタ画像のアニメーション動画が生成されます。

解説

このデモは、[Khugurn] をもとに実装されました。この技術では、1枚のキャラクタ正面画像をもとに、両目および口の開閉・首の三次元の回転を変化させた結果を得ることができます。デモで生成されるキャラクタのモーションは固定ですが、パラメータを調整することである程度の広さを持つ顔向き範囲内では任意の顔向きかつ表情に変化させた画像を生成します。この技術の詳細は、こちら の解説記事にて詳細を紹介しております。是非合わせてご覧ください。

参考文献

[Khugurn] Pramook Khungurn, 'Talking Head Anime from a Single Image', 紹介記事 https://pkhungurn.github.io/talking-head-anime/

Publish: 2020/10/15