【まるでタイムマシン？全てを記録するAI】

スマホやパソコンで見たものを閲覧・検索やAIで要約や質問ができる「Rewind」が画期的

自動でブラウザ閲覧履歴やスクリーンショットをAIが学習

前見た記事の内容などをふらっと聞いて答えてくれる

時間って概念を無視
いつでも過去に戻れるみたい pic.twitter.com/FWkQ8sQIWf

— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) July 28, 2023

源氏物語について質問できるAIアプリ「おしえて源氏物語」をUnityで制作中。まずはWikipediaの光源氏関連記事をデータ化、OpenAIのEmbeddingで質問内容をベクトル検索。最初は短い検索結果を用いてGPT-4で回答生成、ダメなら10倍長い検索結果を使ってGPT-3.5-16Kで回答生成、GPT-4で検証。 pic.twitter.com/XqtLgEynbC

— やのせん@VR/メタバース教育 (@yanosen_jp) July 10, 2023

OpenAIから離れた研究者が作った組織「Anthropic」が汎用言語モデル「Claude 2」を発表。算数•数学や論理やコーディングや安全性などで性能向上。GSM8kで85.2%→88.0%。司法試験の選択問題で76.5%(Claude 1.3は73.0%)。Codex HumanEvalで56.0%→71.2%。米国と英国で利用可能https://t.co/h9zecR1wQ9

— 小猫遊りょう（たかにゃし・りょう） (@jaguring1) July 11, 2023

WhisperのAPIも一般公開。私にもグッピーちゃんみたいな同時通訳が作れるんだろうか？> OpenAI、GPT-4 APIの一般提供開始 - ITmedia NEWS https://t.co/5VepBHLVuY

— 尻P(野尻抱介) (@nojiri_h) July 7, 2023

NHK名古屋放送局さんに当研究室の活動について取材いただきました．対話システムとオペレータの連携，CGエージェント Saya，共同作業対話システムなどに触れていただいています．よろしければご覧ください．https://t.co/Wk2hVIo37m

— Ryuichiro Higashinaka (@RHigashinaka) July 6, 2023

マルチモーダルLLM（特に画像）についてのサーベイ。データ構築、モーダル間接続方法、学習方法、評価方法がまとまっている。LLMはタスク指示、結果取得のインターフェース以外にタスクの制御（タスク分解、ツール選定）、判断、言語由来知識による改善などで使える。https://t.co/xxel4aMRaN

— Daisuke Okanohara / 岡野原 大輔 (@hillbig) July 4, 2023

これめっちゃ便利で実用的！pic.twitter.com/KsKqMAboer

— 入江 慎吾 / AIクリエイター (@iritec_jp) July 5, 2023

【神プラグイン現る】

ChatGPTプラグインは既に420 個以上もあるので、探すのが大変すぎる

そんな全てのプラグインをチャット形式で検索できる「Pluginpedia」が超便利

・仕事で使えるものは？
・画像生成できるのは？

と尋ねると瞬時に回答

表形式での出力やプロンプトの例も提示

↓使い方 pic.twitter.com/q6fxV33wH0

— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) June 26, 2023

「人の動き」をテーマにしたAI「MotionGPT」をTencent等が発表。

テキストから人の動きの動画を生成できたり、反対に人の動きの動画をテキストで説明させたりできる。

これTafiやWonderDynamicsなどの他ツール群と組み合わせたら、テキスト入れるだけで好きなアバターが動き回る動画作れるな pic.twitter.com/uZtiA6mVv3

— KAJI | 梶谷健人 (@kajikent) June 23, 2023