ついに画像生成AI「DeepFloyd IF」が公開された！

テキストをよりよく理解し（テキストエンコーダにはT5 XXLを使用）、テキストを画像中に描画可能。

まずは研究用ライセンスでの公開で、フィードバックを取り入れ、より寛容なライセンスでの公開に移行する予定とのことhttps://t.co/11PzxXD2nx pic.twitter.com/GLNjkfcYRp

— 小猫遊りょう（たかにゃし・りょう） (@jaguring1) April 28, 2023

AI
youtubeの作業用BGMありがちなアニメーション
（曲は動画編集で使えるmiss you） pic.twitter.com/mL1XClGH4k

— 852話 (@8co28) April 28, 2023

【新時代の画像編集AI】

ピンポイントで写真の色を変えれるAI画像・動画編集「Pixelcut」が超面白い

ズボン、服、髪の毛、靴とピンポイントで色を変えれて映え写真を自由に作れる

Metaの新AI「SAM」によりできた新機能

・背景変更
・写真の物体削除
・短編動画自動生成

など機能盛り沢山

↓解説 pic.twitter.com/qTal03mXnq

— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) April 27, 2023

ようやく記事完成したと思ったら、漫画からスクリーントーンを除去して線画を読み込める新プリプロセッサー「lineart_anime_denoise」が追加されたらしいですわ😇😇 #controlnet https://t.co/4PfeEvFMkN pic.twitter.com/FmwuNTOaOS

— 賢木イオ＠スタジオ真榊 (@studiomasakaki) April 27, 2023

Finally!

AI model that analyzes music and creates realistic dances 🕺💃🕺💃

wen AI dance battle?https://t.co/BDpeXaxtK7 pic.twitter.com/7i2bhUnKzl

— Yohei (@yoheinakajima) April 27, 2023

これ、AIが完全にエージェント化しててやばいすね

GPT-4とwhisper活用+カメラでリアルタイムにオブジェクト認識させて様々な質疑応答を可能にしてる⚡️

動画内では「このジュースは何カロリー？」って質問にもソースを提示した上で答えてくれたり。pic.twitter.com/84v3j9hX3d

— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) April 27, 2023

【必読】動画の中身について質疑応答できる『Ask-Anything』がすごかった⚡

・再生中の動画について質問→回答を生成
・GPT,miniGPT4,StableLMを活用
・動画に関する回答から一般論の生成まで可能

またすごいの出てきましたね

GPT活用ってことは動画に関係ない一般論の生成もできるってことか🤔 pic.twitter.com/Xzy4jQhvL2

— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) April 24, 2023

新しくNijijourneyに搭載された背景特化スタイルの「scenic style」を試してみてる。

画像はそれぞれ一旦「Shinjuku」「Shibuya」「New York」「Paris」とだけ入れてみた結果なんだけど、どことなく新海誠っぽい笑 pic.twitter.com/ZeCBCRPPf6

— KAJI | 梶谷健人 (@kajikent) April 25, 2023

【速報】
最強のAI動画編集「Runway」が遂にiOSアプリをリリース（今まではPC版のみ）

実際に使ってみたが、スマホでAIによる文章動画編集はヤバい

UIも最高で超楽しい

制限あるが基本無料利用可

Text to Video機能も今後使える

やっぱりスマホで簡単にAIを使えるのがAI普及の鍵となる

解説↓ pic.twitter.com/JQjAOxpg49

— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) April 25, 2023

構図指定や、特定のアイテムを特定の画角と位置で置きたい場合。プロンプトで出そうとすると相当難しいけれども、欲しいアイテムを個別に低解像度でしゅつりょくしたらあとは雑コラ作ってi2iすると、わりと思い通りの表現がいけた。 pic.twitter.com/IhzksPFnNA

— こぴぺ(AIイラスト) (@co_pipe_AIArt) April 24, 2023

AIキャラクターなのに、これだけの動画を出されると実在感ハンパないな。 https://t.co/or3O9Zr0PQ

— MuRo (@MuRo_CG) April 23, 2023

既存の3D生成AI（4つ）とMeta AIの出したsegment anything model(SAM)を組み合わせて画像上の色々なオブジェクトを3次元化できるAnything-3Dが発表。
下図は最初にSAMをかませて画像から犬を抽出し、後はここ半年Dreamfusionあたりから使われている3D合成の発展版の3DFuseを使用した例。 https://t.co/zP98qbf24h pic.twitter.com/bQ1BRJ1CiF

— bioshok(INFJ) (@bioshok3) April 21, 2023

Gen2でテキストからのみ生成したアニメらしい。こういう系の動画生成見てるとこの技術がどこまで到達するのか、いつまで3DCGが必要とされるのかふと頭をよぎる https://t.co/zDiRyC1yie

— Hirokazu Yokohara (@Yokohara_h) April 21, 2023

「ええ～、アプデったってそんなに変わらんでござろう～？」と思って触ってなかったControlNet1.1触ってみたけど。実装されたAnimeLineartの自動着色が1.0のscribble着色と比較してかなり精度が上がってますね。これはなかなか使い物になってきましたわ。 pic.twitter.com/8jvoavVcaX

— あぶぶ＠健全 (@abubu_newnanka) April 21, 2023

AIで動画生成テスト5。以前作ったリアル系のCG動画をイラスト風に変換。今回はi2iを多段階で処理してみた。元動画が低画質なので不要な揺れが出てる気がする pic.twitter.com/ezjPAy6vxA

— Hirokazu Yokohara (@Yokohara_h) April 21, 2023

「あの頃Lora」作った話｜852話 @8co28 #note https://t.co/h2i5MG5fOA

— 852話 (@8co28) April 21, 2023

AI
90年代～2000年初頭周辺までの「あの頃」の所謂美少女萌え絵が出せるLoraを配布します。
このLoraはAI出力画像によって作成されており、既存の著作物は学習に使用していません。
少々癖があり破綻しやすいです、promptは適当にALT参考にしてください。https://t.co/48CRQzc728 pic.twitter.com/PwaVVuJ8at

— 852話 (@8co28) April 21, 2023

お絵描きをリアルタイムで画像生成する
このスクリプト作った人、MADだな笑(リスペクト)
お絵描きに集中できるか不安になってきた笑
🔗　https://t.co/fJ2yeCjd0Rpic.twitter.com/1ZbbfBwK6D https://t.co/9Hf2dMAj64

— しょーてぃー / Experience Designer & Prompt Designer (@shoty_k2) April 18, 2023

テキストから動画を生成するInVideo AIが来週ついにローンチ
触ってみたい...

🔗先行登録https://t.co/tWeg7fMrf4pic.twitter.com/oeCgOqLGrI https://t.co/UPyxsyhAEY

— しょーてぃー / Experience Designer & Prompt Designer (@shoty_k2) April 18, 2023

【速報】Meta AIが高性能なコンピュータビジョンモデルをトレーニングする新しい手法『DINOv2』をリリースを発表👁

ファインチューニング不要で、さまざまなコンピュータビジョンのタスクに活用できる。… pic.twitter.com/NtwaGbQ7mL

— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) April 17, 2023

The combination of #stablediffusion and #controlnet could potentially revolutionize the entire manga and anime industry. ✨ model: https://t.co/UERQoxOPFa + #ControlNet v1.1 Control anything v3 with anime lineart 🥳 #colab please try it 🐣https://t.co/NTydgKORpP pic.twitter.com/aQFdgDuoq9

— camenduru (@camenduru) April 14, 2023

無料でキャラクターイラスト1枚からぬるぬる動くアニメーションを作成するAI「Animated Drawings」をMeta AIがリリースhttps://t.co/2huNDUnGFw

— GIGAZINE(ギガジン) (@gigazine) April 14, 2023

単一画像をインプットすると細部まで高品質な動画を生成する『DreamPose』という技術が公開🔍

・画像をポーズモデルに合成→動画を生成する
・Stable Diffusion活用
・複数画像をインプットすると精度向上

結構スムーズに動いてる感じあります

ECサイトとかVR空間でめちゃ活用できそう💡 pic.twitter.com/kVGuPohyl0

— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) April 13, 2023

けさ見た論文ｗ
"Follow Your Pose"＝Pose-Guided Video Diffusion！
例示の動画からポーズ挙動をガイドにtext2video生成できる奴
試した(上:例示→下:生成)

🕺🕺🕺 Follow Your Pose 💃💃💃
Pose-Guided Text-to-Video Generation using Pose-Free Videos (Mon, 3 Apr 2023)https://t.co/AQz4oT8ry8 pic.twitter.com/Cr6gAnIYqr

— forasteran (@forasteran) April 12, 2023

画像生成AIで、手書きの棒人間の絵を
イラストに変換してもらって企画書に使う実験。

ド下手な棒人間もちゃんと認識してくれて、そのままイラストにもしてくれた。

これは資料作成する全ての企画、営業職が助かるやつ！ pic.twitter.com/3RRBtAFazn

— 武地 実 @Gatebox × ChatGPTクラファン (@takechi0209) April 11, 2023

すげええええぇえぇえ！！！こんな動画をAIが作ってくれる時代！！！🤯🔥🙀✨🌟🎉@WonderDynamics pic.twitter.com/CFSMrAwKXO

— オレンジ/メタバース撮影技術者 (@orange_3134) April 7, 2023

これは革新的

3Dのマネキンを自由に動かして、好きなポーズで画像を生成できる「https://t.co/7Zg0N2FyYD」が面白い

しかもリアルな人だけでなくアニメ画像にも対応

ポーズを決めて、プロンプトを打てば瞬時に画像を作れる

これは画像生成の幅が広がる

無料で使えて最高 pic.twitter.com/fRxQexe0jd

— チャエン| Web3.0×海外テック×AI (@masahirochaen) April 7, 2023

Meta AIのSegment Anythingのデモを触ってみてるが、意味わからないくらいセグメンテーションの精度高いな…。

マネキンの腕の時計や建物の窓一つ一つまで細かく識別。

これがLightroomなどの画像編集ツールに載ってくるとレタッチめちゃくちゃ楽になりそう。 pic.twitter.com/s40lbLSm50

— KAJI | 梶谷健人 (@kajikent) April 7, 2023

#nijijourney 出力なのですが流石の既視感に学習画像そのまま出てるんじゃないか？という危機感を覚えたのでCCさくら有識者の方この画像「モロ元画像あるよ」みたいな絵があったら教えていただけませんかpromptは「1990sの同人便箋 --ar 2:3 --niji 5」のみです。 pic.twitter.com/kjCqV1lxrY

— 852話 (@8co28) April 6, 2023

Reading @MetaAI's Segment-Anything, and I believe today is one of the "GPT-3 moments" in computer vision. It has learned the *general* concept of what an "object" is, even for unknown objects, unfamiliar scenes (e.g. underwater & cell microscopy), and ambiguous cases.

I still… pic.twitter.com/lFWoYAxDmw

— Jim Fan (@DrJimFan) April 5, 2023

zero-1-to-3https://t.co/MCWpHM565y
１枚画像から別視点の画像が作れるらしい。
えぇ、これすごい、すごくない…？ pic.twitter.com/7PuXqDAxeD

— 中鉢 (@Chubachi) April 4, 2023

AIイラスト生成サービス「niji・journey」がついにV5モデルを公開！https://t.co/9xPV26GGcw

— やまかず (@Yamkaz) April 4, 2023

ControlNetを使って手軽にGIFアニメを制作できるWebUI拡張機能が公開https://t.co/3huAoRdS9E pic.twitter.com/WMFp3iLPpT

— やまかず (@Yamkaz) April 4, 2023

【悲報】画像生成AI『Midjourney』が無料トライアル停止を発表

・1年で1300万人のメンバーを獲得､急成長
・異常な需要と､トライアルの悪用がトライアル停止の理由と説明
・フェイクかどうかの見分けが付かずハラスメントやプロパガンダの温床となる可能性を懸念か

そうなるよなあ... pic.twitter.com/VSGUcbL9eu

— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) April 2, 2023

動画生成AI「https://t.co/appKlfcbLO」が便利すぎてど肝を抜かれた

・無料利用可
・AI画像生成
・日本語対応
・URL to Vieo
・Text to Video
・Twitter to Video
・豊富な画像・動画テンプレ

と機能が多すぎ

生成動画の編集自由度も高い
日本語読み上げも可能で使い勝手No.1動画AI

後日解説予定 pic.twitter.com/YoMsrpv0nT

— チャエン| Web3.0×海外テック×AI (@masahirochaen) April 1, 2023

ここまでかわいらしくて
スッキリした絵が描けると
さすがにヤバい https://t.co/fpdYUjfxZ5

— YANO Tomoaki@20230612SEAD35in広島OS2-5 (@yanotomoaki) April 1, 2023

日本経済新聞TheStyle2023年4月2日#AIアート を考える指針となる良記事
著作権を問い直す良い機会だと私は思う https://t.co/KZ753IDdVJ pic.twitter.com/cZ6dC0aYxm

— YANO Tomoaki@20230612SEAD35in広島OS2-5 (@yanotomoaki) April 1, 2023