【OpenAI Sora x Adobe】
Adobe Premiere Pro でOpenAI Soraが利用できる未来を描くデモリール。未来の動画編集はこうなると予見させてくれる。

こうなると動画制作・動画編集は全く違う領域を作り出す可能性がある。これは大きな変革#生成AIpic.twitter.com/bHUtXcECPN

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 16, 2024

【Adobe Premiereの生成AI機能の全貌】
Adobeが発表した、生成AI機能の紹介動画のロングver。

利用できるモデルは、新しいFireflyビデオモデル、Sora、Runway、Pikaを始め、その他多くのAIビデオ編集機能が盛り込まれる予定。#生成AI #動画 #動画編集pic.twitter.com/Sa79YKbeY7

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 16, 2024

【整合性高い3DCGを生成】
InstantMeshは、1枚の画像から3Dメッシュ生成できるフレームワーク。1枚の画像から、見えない部分もかなりの精度で出力可能。

「みかん」でできた象など、特殊なものもかなりの整合性。

続く>>#生成AI #3DCGpic.twitter.com/dPpT45sWRt

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 16, 2024

【効果音生成AIリリース！】
効果音がテキストから生成できる @OptimizerAI の1.0がリリース。動画に効果音があるだけでクオリティは1段階引き上げられる。

今後AIアニメプロジェクトでも試していきたいサービス。WebまたはDiscordで利用が可能#生成AI #効果音pic.twitter.com/VemLZARpe5

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 16, 2024

【整合性が取れた360度ヘッドアバター】
SphereHeadは、高品質の首から上の3Dフルヘッドを生成できるフレームワーク。

GANを利用しつつ正面図と背面図の両方の画像を含む大規模なデータセットを使用して実現。ほぼ完璧な一貫性を実現している。

続く>>#生成AI #AIpic.twitter.com/KAXfPJlvjO

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 16, 2024

【生成AIで長時間動画を生成を目指す】
MiraはSoraのように生成AIで長時間の動画を生成を目指すプロジェクト。

構造化キャプション付きの長いビデオデータセットMiraDataを利用し、10秒、20秒、それ以上の動画を生成可能に。

続く>>#生成AI #動画生成AIpic.twitter.com/wZpHYgoz8N

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 17, 2024

【AI x アートで新表現】
絵の中を探索するようにそして座標が変わるたびに世界が少しずつ変わるようなAIアート。

一貫性ではなくてAIのブレを利用した世界観はAIならではな感じがして魅力的。

Creator：@MartinNebelong#生成AI #AIアートpic.twitter.com/9YW3TziIc2

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 17, 2024

【動画からゲームを生成】
Video2Gameは1つの動画から現実世界のシーンでのインタラクティブなゲームを自動的に生成するアプローチ。

カーレースや椅子破壊ゲーム、コイン集めなど、プロジェクトページでは多数のデモが公開されています。

続く>>#生成AI #ゲームpic.twitter.com/B3LhTksYk4

— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 17, 2024