• 締切済み

カメラと連動するリアルVTuber作成

Webカメラやスマートフォンのカメラと連動して動く、人間のようなリアルなVTuberを実験的につくりたいと思っています 目的は配信ではなく、プレゼンテーション動画やユーザーマニュアル動画(資料説明)の解説役を、架空のというか人工的につくったアバター(キャラクター)でやらせたいのです スピーチ原稿が固まっていない場合も想定し、動画から変換ではなく、カメラで移した人間の動きに合わせて動くものを想定しています。 現在VTuber作成の説明動画をみると、カメラの動きに合わせてアニメなど2次元キャラクターがリアルに動くものはあるようです。 その際、 ・Live2D ・VRM などの形式のファイルを用意する必要があるようです やり方を調べると、ど2次元キャラクターで説明しているものがほとんどです アバターはアニメキャラではなく、画像系生成AIで作成した人間にみえるものにしたいのですが、髪の毛があるため難しく、上記ファイルに加工する方法を探しましたがみあたりませでした。 後ろを向いたり踊ることはなく、アバターのフロント(前面)とすこし顔(目)や手や口が動くだけでよいと考えています。 リアルな人間の静止画像を、VTtuberのアバターのよう、カメラが捉えた人間の動きに合わせてに動かす(話させる)方法はあるでしょうか? Warudoもあるようですが、二次元アバターばかりです なおxpression cameraは、コスト的に外して考えています

  • ketae
  • お礼率86% (295/343)

みんなの回答

  • MT765
  • ベストアンサー率56% (1901/3338)
回答No.1

画像・動画編集合成などを趣味でやっているものです。 まずは順番としてLive2DならLive2Dから勉強してみましょう。 >画像系生成AIで作成した人間にみえるものにしたい 別にリアル系でもパーツ・レイヤー分けをしっかりすれば問題なくできますよ。 Aiで出力したものは1枚の画像なのでそれを作るなら手作業でパーツ・レイヤーに分離させる必要があります。 口パクや目閉じなどにも対応させる必要があるかも。 これは非常に面倒ですがやってできないことはないです。 (AIではなく、一からLive2D用に作るほうが早い) アニメっぽい絵の解説サイトばかりでもやり方は同じですから参考にするといいでしょう。 それをモーションキャプチャーなどに合わせてリアルタイムで動かすものもすでにありますから利用すれば良いと思います。

ketae
質問者

お礼

ありがとうございます 3D/CG系で3D化すると、表面がポリゴン風になりちょっと求める質感ではないので、Live2Dかなあと思っていました >一からLive2D用に作るほうが早い の一からの意味がちょっと不明ですが、パーツを切り出してつくるという意味ですかね あとで帰宅したら、ゴリごろやってみようと思います

関連するQ&A

  • Vtuberとリアルの境界線をどう思いますか?

    バーチャルユーチューバー(以下Vtuber)は3Dキャラが実際にある商品を 持ったりできないのでゲーム実況や歌が歌えれば「歌ってみた」、雑談動画が多くなりがちです。 でもキャラクターの絵にもよるでしょうけど手元だけリアルの手を映して商品紹介したり、 リアルゲームをやってみたりするのもありだと思うのですが皆さんはどうですか? 「いやいやバーチャルなんだからリアルな手元映すなよ!」といった感じでしょうか?

  • Live2D用人物静止画像のポーズ

    ・上半身VTuberのキャラクターを作成する場合、どんな姿勢の画像を用意すべきでしょうか Webカメラやスマートフォンのカメラと連動して動く、人間のようなリアルなVTuberキャラクターを実験的につくりたいと思っています 人物画像はAIで生成しています Live2Dで静止画像からパーツをつくるのだと思いますが、上半身(おヘソより上)の人物の画像をどのようなポーズで生成すべきか悩んでいます 手は、手の指先が見えるようにしたいのですが、まだAIが上手く生成できていないので、パーツ分け作業に入れていません ところで、そもそもどんな「姿勢」の静止画を用意すべきか悩みました 質問: 上半身VTuberのキャラクターを作成する場合、どんな姿勢の画像を用意すべきでしょうか 1)下記の2つのポーズで静止画をまず作成していますが、どちらのアプローチが正しいでしょうか? 2)ツールはLive2D Cubism(www.live2d.com)、Photoshop、Illustrator  の3つがあるのですが、他に使うとキャラクター作成に便利なツールはあるでしょうか? よろしくお願いします

  • Flashでのアニメ作成について

    FlashMXを独学で使っています。今回アニメを作成するに当たって、画像をイラストレーター(V.10)で作成し、Web保存し(gif)、FirewoksMxで書き出しFlashに読み込んでいますが困ったことに、背景画像(レイヤー)の上にキャラクターの画像(透明gif=別レイヤー)を重ねると輪郭(黒)の縁の背景に重なる部分がが白くにじんだ感じで出てしまいます。やむなく画像作成の段階で背景とキャラクターを合成して読み込んでいますが、キャラクターをモーショントゥイーンで動かしたいのでできればキャラクターを独立した画像にしたいのですが、どうすればいいのでしょうか?また、Flashアニメ(キャラクターの動き)をスムーズに作成するための参考になるサイトをご存じの方は教えてください。ちなみにアニメと言ってもごくシンプルなアニメです。単純な背景の上を2等身キャラが歩くだけのアニメなのですが。

  • Real Playerで困ってます。

    もともとReal Playerは 入ってませんでした。 本日インストールしました。音楽を聴くためです。 それ以前 ビデオカメラ(ソニーDCR-SR100)で撮影した画像を編集するため 手持ちの編集ソフトTMPEGEnc MPEG Editorに動画ファイルを数個入力。 まとめて出力。これで1個の結合されたファイルとなります。そのファイルはWクリックしましても、拡張子の関係エラーとなり、開けません。 たまたまReal Playerを本日入れたところ、開けなかったファイルがすべてRealアイコンになってます。 それでこれをWクリック。 Real Playerが立ち上がり 結合ソフトは再生されました。しかし音がでません。 おかしいと思って 同じく結合前のビデオカメラで撮影したままの動画ファイル これもRealアイコンになってますが 音が出て再生されます。 なぜでしょうか?

  • 2台のデジタルビデオカメラの同期

    2台のデジタルビデオカメラからキャプチャした動画より静止画像を作成してステレオマッチングによる物体の3次元座標を取得しようと考えています。その際に、フレームを合わせるため2台のカメラの同期が必要になるのですがその方法がわかりません。カメラについてはまったくの初心者ですので詳しく教えていただけるとありがたいです。よろしくお願いします。 なお使用するカメラはSONYのHDR-SR1です。

  • アニメの作成について

    アニメを作成するとき、動きを一枚一枚描いていきますが、絵がずれたりすると動画もずれてしまいますよね?(1の絵の手だけを動かすのに2で足をずらして動かさなくてもいいところまで動かしてしまったとか) これはどうやって綺麗に絵を連続して描かれているのでしょうか? 半透明の(薄い)紙かなにかを重ねて少しずつ動かしているのでしょうか?

  • FC2にアバターを貼り付けたい

    yahoo!アバターで作成したキャラクターを自分のブログFC2に 貼り付けたいのですが、可能でしょうか。 また、アバターの画像を右クリックし名前を付けて保存にしても 保存先に画像が写りません。どのようにしたら良いのでしょうか。

  • アニメ作成ソフト

    ミッキーマウス クラブハウスみたいなフルCGを作成する場合 どのようなソフトがあれば できるのでしょうか? キャラクターだけでなく、動画も作成出来るものが ありがたいです。 いくつかのソフトを使っているのでしょうが... フラッシュなどでパラパラアニメみたいな物(アニメーションgif)などは 作成した事があります。 宜しくお願いします。

  • 画像一枚で上下に動くGIFアニメが作成できるソフトは?

    題名どおりなのですが、一枚のみの画像から上下に動くGIFアニメを作りたいです。 GIFアニメ作成のソフトはいろいろあるようですが、最低2枚の画像を用意しないとGIFアニメは作れないものばかりです。 作成個数が多くて、2枚づつ画像を作るのが面倒なので、一枚の画像からそういった動きのGIFアニメを作成してくれるソフトを探しています。 作りたいアニメーションは単純で、少しだけ上下に繰返し動かしたいだけです。 良いソフトがあれば、教えて下さいませ。

  • リアルな3D動画を作りたい

    1分くらいの動画でいいです!FFやDOD並みのリアルな質感の物を作りたいんです 派手なアクションはなくて構いません 立ったり走ったりできれば 質問したい事 1.パソコンとフォトショ、3Dソフトだけで作れますか?他何か用意するものは? 2.期間はどれくらい必要ですか?専門学校生ですがそれほど忙しくないんで時間に余裕があるほうです 3.動画作りに参考になるサイトを教えてもらえませんか?FFやDODっぽい動画 3Dキャラクターを作っているサイト等 4.当方女ですが プロアマ問わないで女性でゲーム関連の3D動画作成してる人はどれくらいの割合ですか?予想だと9割くらい男の人のイメージがあります 補足 全然リアル系じゃないけど3D動画を作った経験あり