ダンス生成AIの「DreaMoving」がデモを公開！他 / Catch up on AI 2023.12.29
Pick up
アリババが、 Hugging Face上で動作するダンス生成AI「DreaMoving」を公開しました。画像とモーションを選択するだけでスムーズなダンス動画が生成。
DreaMoving Demo
https://huggingface.co/spaces/jiayong/Dreamoving
【ダンス生成AIのデモが触れる】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 28, 2023
アリババが、 Hugging Face上で動作するダンス生成AIの「DreaMoving」を公開！
サンプルで試してみようと思いましたが、アクセスが多く、現時点で478タスク、現在395分待ち。
動画生成時間は約5分ほど。動画は公式サンプルです。
デモは続きから>> pic.twitter.com/gVtddCOK8l
Catch up on AI
一貫性の動きがある3DCGが生成可能「4DGen」
【一貫性の動きがある3DCGが生成可能】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 29, 2023
4DGenは、4D（3D+モーション）のコンテンツが生成できるフレームワーク。
今までの先行研究では動きは可能だが、整合性が取れた動きを追加することは難しかったが、静的な3Dアセットとビデオシーケンスに基づいて4Dを生成。
続く>>pic.twitter.com/caRQB9FA0w
時間情報も持った8K60fpsの3Dシーンを生成「Spacetime Gaussian Feature Splatting」
【時間情報も持った8K60fpsの3Dシーン】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 29, 2023
Spacetime Gaussian Feature Splattingは、時間情報も持たせた、3Dシーンのスキャンが可能。動画では無く、3Dシーンなので自由視点で見て回ることが可能です。
RTX4090 で、8K 60fpsでレンダリング可能pic.twitter.com/xc4wb8PmnK
生成AIを利用して、スター・ウォーズ感を楽しむ動画
【ただの棒をライトセーバーにする】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 29, 2023
生成AIを利用して、スター・ウォーズ感を楽しむ動画。
AnimateDiffとMulti ControlNet (InstructP2P + ZeoDepth + OpenPose) そしてライトセーバーの音。
左上の元動画が楽しげ！是非音声有りで。#生成AI #AI https://t.co/CM4iE2lwvz
辰年用の浮世絵画像
【辰年用の浮世絵画像】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 29, 2023
MidJourney v6で来年は辰年ということで、浮世絵風の辰を作成してみました。
プロンプトには葛飾北斎など固有の作家はいれていないですが、どうしても波が出る。
これはデータ量なのか、龍だからなのか。#生成AI #AI #浮世絵 pic.twitter.com/a8cp9l4ZBS
FlowPolotと言われるOpenPilotのオープンソースフォークでの海外の自動運転実験
【海外の自動運転実験】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 29, 2023
インドで行われた、自動運転のデモ。Snapdragonプロセッサを使用した自動運転車で行われた。
FlowPolotと言われる、 @Mankaran32 とチームによって開発されたOpenPilotのオープンソースフォークで動作。コードも公開されています。
続く>>pic.twitter.com/Ui1ogO54uU
ラーメンの中のナルトも識別「LangSplat」
【ラーメンの中のナルトも識別】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 29, 2023
LangSplatは3Dシーンをスキャンしセグメントしてくれる技術。
・オブジェクト間の境界を完璧にセグメンテーション
・Meta SAMを使用して学習
・シーン固有の潜在空間に圧縮
・LERFよりも約200倍高速で性格
続く>>pic.twitter.com/GjYApiDAiQ
デジタルクローンプラットフォーム「Delphi AI」
【デジタルクローンプラットフォーム】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 28, 2023
Delphi AI（ @with_delphi ）は。自身のSNSや様々な情報を読み込ませ、クローンを作成し、対応させることが可能。
有名人はいずれ、AIで基本活動し、本人に会う価値が凄まじく上がるなんてことも起きるかも。#生成AI #AIpic.twitter.com/yvoPgiUYGA
わずか4.5分で4Dを生成「DreamGaussian4D」
【わずか4.5分で4Dを生成】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 28, 2023
DreamGaussian4Dは、4D Gaussian Splattingを非常に短時間で生成できるというもの。
アニメ付きの3Dが簡単に生成できるように今後はなっていきそう。3DCGにリグ入れてというのも来年どこかでAIがやってくれているかもしれない。
続く>>pic.twitter.com/0KK99CaRDO
AIのNewsやアートワーク情報を更新中⚡
X（Twitter）ではAIの最新情報を発信中🐦
この記事が気に入ったらサポートをしてみませんか？