Animate Anyoneはキャラの静止画像から自然なモーション動画を生成するAI
Animate Anyoneというキャラクターなどの静止画にモーションをつけて動画を生成する衝撃的な生成AIが誕生しました。
まだ論文で研究が発表された段階ですが、その自然で高精度な動きにSNSでバズって日本でも注目を集めています。
静止画のキャラとモーションから非常に自然に滑らかな動きで一貫性を保持した自然な動画を生成します。
今後も注目を集めるであろうAnimate Anyoneについて紹介します。
生成AI「Animate Anyone」とは
Animate Anyoneは中国のアリババグループのメンバーが2023年11月に発表した生成AIです。
Github上にAnimate Anyoneの情報が公開されています。
静止画のキャラクターから動画を生成するimageToVideoのAIとなっています。
SNSでバズって日本でも注目
Animate Anyoneは11月30日に旧TwitterのXで取り上げられ、大きな話題を集めました。
生成AIの情報を発信しているアカウントに取り上げられるや、多くのユーザーが注目して拡散されてトレンド入りしました。
IT関連のワードで唯一トレンド入りしています。
キャラクターイラストから動画が生成されるという点に日本人は強く反応したと推測されます。
Animate Anyoneは自然な動きの動画を生成
そんなAnimate Anyoneの特徴は、キャラクターが自然な動きの動画を生成することです。
この動画のようにアニメキャラクターの静止画と、動きのモーションデータを用意すると、非常に自然な動きを見せる動画が生成されます。
これまでも画像から動画を生成するAIは発表されていましたが、どうしても一部に違和感が生じていました。
しかし、Animate Anyoneで生成された動画は非常に自然で、一貫性が保たれています。
静止画では表現されていない箇所もうまく補完されており、違和感のない動画に仕上がっています。
このようにキャラ画像から用意したモーションに従ってとても滑らかに動く動画を生成できるのがAnimate Anyoneの特筆すべきポイントです。
アニメだけでなく写真からも動画生成
さらに、Animate Anyoneは名前にアニメとなっていますが、対象はアニメだけではありません。
写真(リアルな人物の静止画)からでも動画を生成することができます。
上記の動画のように女性の写真と踊りのモーションを用意して、踊る動画を生成しています。
その他にもAnimate Anyoneのページでは、男性の写真と歩行のモーションを用意して、歩く動画を生成しているデモ動画も紹介されています。
写真と動きをいくつか用意すれば、バリエーションのある動画が作成可能です。
Animate Anyoneは研究段階の生成AI
ただ、Animate Anyoneは論文が発表されたまだ研究段階の技術です。
そのため、生成AIのモデルやコードは公開されておらず、アプリとして利用もできません。
しかしその衝撃的な生成AIの技術に、多くのユーザーがモデルやコード、アプリケーションの公開を待ち望んでいます。
Animate Anyoneで生成AIによる踊ってみた動画も
Animate Anyoneを使えば、動画サイトでよくある踊ってみた動画を生成AIで作ることができます。
人物の写真を用意して、踊りのモーションデータのバリエーションを用意すれば、大量の踊ってみた動画を生成できます。
将来的には踊ってみた動画がAnimate Anyoneで生成されて、TiktokやYoutubeに投稿される未来も訪れるかもしれません。
まとめ・終わりに
今回、2023年11月に新たに発表されたImageToVideoの生成AI、Animate Anyoneを解説しました。
中国のアリババグループが論文発表したこの生成AIは、キャラ画像とモーションを用意すれば、キャラがモーションに従った動きの動画を生成してくれます。
Animate Anyoneは非常に自然で滑らかな動きが生成されるのが特徴で、SNSで取り上げられて日本でも大きな反響を読んでいます。
まだ研究段階のためモデルやコードは公開されていませんが、早くAnimate Anyoneが使えるようになることが望まれます。