長時間の動画生成を可能に「StreamingT2V」他 / Catch up on AI 2024.4.7
Pick up
まだまだ一貫性は低いですが、20秒ほどの動画が様々な動画生成フレームワークで生成が可能に。今後の可能性・発展に注目です。
StreamingT2V:
Consistent, Dynamic, and Extendable Long Video Generation from Text
Project：https://streamingt2v.github.io
arXiv：https://arxiv.org/abs/2403.14773
Code：https://github.com/Picsart-AI-Research/StreamingT2V?tab=readme-ov-file
【長時間の動画生成を可能に】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 7, 2024
StreamingT2Vは、T2V/I2Vが可能で、AnimateDiffやSVDなど含め様々なフレームワークに対応。
さすがに長時間ともなると完璧な整合性は難しいですが、20秒ほどの動画が生成できています。
続く>>#動画生成AI #AIpic.twitter.com/KQOXxq4fmN
Catch up on AI
ポートフォリオの質を上げる Shots BETA
【ポートフォリオの質を上げる】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 7, 2024
Shots BETAは、選択していくだけで、高品質なポートフォリオ用の画像が生成できるサービス。
パッと見の印象というのはとても大事で、人間だけではなくて実績や作品もとても大切。こういったツールはとても助かりますね。#クリエイティブpic.twitter.com/2oMhjuxAY3
スーパーマーケットとAR
【スーパーマーケットとAR】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 7, 2024
意外と迷ったり、どこになにかわからなかったり、情報が溢れているけど迷うスーパーマーケットを圃場するAR。
ガイドが必要なシーンは日常に意外にあるなと改めて。#ARpic.twitter.com/qeVyP7w4Mx
AIで18Kアップスケーリングに対応
【AIで18Kアップスケーリングに対応】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 7, 2024
元の画像はW1456ピクセル、H816ピクセル、1.9MB → W17472ピクセル、H9792ピクセル。ファイルは200MB以上。
強力なハードウェア構成でもアップスケールに1時間以上かかるとのことですが、凄まじい精度。#AI #アップスケール https://t.co/tOkCV1F2b6
AIアバターでA/Bテスト
【AIアバターでA/Bテスト】@HeyGen_Official がAIアバターを利用したA/Bテストが実行できる「Instant A/B Tests」をリリース。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 7, 2024
スピーチだけでは無く動画コンテンツ生成にも最適化されてきた。徐々にAIアバターが担う時代に突入するかもしれない。#AI #AIアバターpic.twitter.com/mYMbxGt5EL
Command R+がAzureで
【Command R+がAzureで！】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 7, 2024
Command R+ は検索拡張生成 (RAG) 用に高度に最適化されたLLM。
企業とMicrosoftの相性も良いし、情シス突破しやすいので、これはAI界隈に取っては大きなニュースになるかも。
続く>>#LLM #AI https://t.co/QjWFzsuIiZ
人のジェスチャーを理解 FSD
【人のジェスチャーを理解】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 7, 2024
FSD（Full Self-Driving） v12.3.3でのデモ。
人間を見つけて停車ここまではいつもの自動運転ですが、歩行者からの手を振って行ってくださいの動きに反応して走行開始。
自動運転あまり追いかけていませんが、この分野もどんどん進化。#AIpic.twitter.com/7vHvrsVDGO
リアルタイムプロンプトに重み付け
【リアルタイムプロンプトに重み付け】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 7, 2024
プロンプトごとの重要度を簡単にパラメーターでコントロールできるUI。SDXL-Lightningなのでリアルタイムに結果を見ることができる。
リアルタイム生成と組み合わせるととても体験が良い！デモもすでに公開されています。
続く>>pic.twitter.com/w3l8AlqWtx
動画生成AI x AIクリエイター
【動画生成AI x AIクリエイター】@HaiperGenAI を利用しているクリエイターの作品を集めたPV。様々な描画が1分弱の動画にまとめられている。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 7, 2024
実写・イラストレーション・CGのような表現などかなり多様性がある。#動画生成AI #生成AIpic.twitter.com/9Mv6v7PHGW
AIのNewsやアートワーク情報を更新中⚡
X（Twitter）ではAIの最新情報を発信中🐦
この記事が気に入ったらサポートをしてみませんか？