AI学術情報(2023年2月アーカイブ)

脳波を記録し、人間がゲームをプレイするエージェントを見ているだけで、学習速度が2.25倍になった話
エージェントの行動に対してErrPを発生させるかどうかを検出し、それに応じて報酬を与える

Accelerating Reinforcement Learning using EEG-based Implicit Feedbackのhttps://t.co/PsTvnCfulN

— らむね (@__ramu0e__) February 26, 2023

遂に人類は記憶を再生するというSFの世界線に突入してしまった

iPhoneで撮った動画を3D化して、VRゴーグルで過去の思い出を「今」体験できる。

この技術とAIを組み合わせるとAIが記憶を「継続」したり「別のシナリオ」を再生することも可能

擬似的なタイムトラベル、パラレルワールドが実現する… pic.twitter.com/QdIbkNo2bz

— チャエン| Web3.0×海外テック×AI (@masahirochaen) February 26, 2023

LLaMAの論文の中にしれっとGoogleのPaLMの540Bサイズのベンチマーク性能が出ているが格段に性能良いな…笑 pic.twitter.com/9G2cY7Fm5n

— KAJI | 梶谷健人 (@kajikent) February 25, 2023

ChatGPTなどのLLMをスケールアップしていくと，モデルが当初想定していなかった新しい能力を獲得する創発現象（特定タスクについてのAccuracyがTransformerのスケーリング則では説明できない上昇を見せる）

その出現条件に共通するパターンは見つからなかった，というブログhttps://t.co/fFX8JugLvF pic.twitter.com/PtCM7HAoyy

— Yusuke Hayashi（林祐輔） (@hayashiyus) February 24, 2023

やばいいいぃぃ
OpenAIがAGIへの短期/長期計画を発表！
めっちゃワクワクした！ちょっとまとめるhttps://t.co/cNpQ4XmH0u

短期:
1.段階的にAGIのある世界へ
・AI導入課題を乗り切る最適解、迅速な学習と慎重な反復の緊密なループ
・AGIに近づくにつれ、作成と展開に慎重に(続く)

— やまかず (@Yamkaz) February 25, 2023

うぉぉぉぉ！！！ついにきた！！！！

テキスト指示から複数のUIデザインを生成する
「Uizard Autodesigner」が近日公開予定https://t.co/mlRg9Hmg34 pic.twitter.com/fociFdtEGp

— やまかず (@Yamkaz) February 24, 2023

https://t.co/wZep9nKAHA
AIアライメントの先駆者　Yudkowsky氏が超知能、AGI、などの話をしている。超面白い。
とりあえず聞きながらおもろいとこまとめる。
Y氏「ChatGPTが人類を破滅に追いやる可能性はない」

— bioshok(INFJ) (@bioshok3) February 22, 2023

ドイツのAIスタートアップ「Aleph Alpha」が今年、GPT-4に対抗する可能性https://t.co/XHCi4L6RF9

今月、OpenAIの新モデルの代替品レベルの「Luminous Supreme Control」をリリースし、別で3000億パラメーターの「Luminous-World」がテスト中で今年後半にリリース予定

— やまかず (@Yamkaz) February 22, 2023

アマゾンがChatGPTのライバル支援へ、ハギング・フェイスと提携拡大https://t.co/2taVnTHEO5
『クラウド部門でデータベースや分析、機械学習を担当するバイスプレジデントのスワミ・シバスブラマニアン氏によれば、ハギングフェイスは「BLOOM」と呼ばれる言語モデルの次世代版をＡＷＳ上で構築する』

— 小猫遊りょう（たかにゃし・りょう） (@jaguring1) February 22, 2023

｢最強の囲碁AIに人間が圧勝！！！｣

まだまだ知らないことが多い！

人間がAIに圧勝した棋譜

白: 人間(アマチュア)
黒: AI

右上の黒石が取られる運命で、AIが投了(白の中押し勝ち)

最強将棋AIに勝つアマチュア選手みてみたいですねhttps://t.co/CMNBVtgjeOhttps://t.co/rUgv0M5LTn pic.twitter.com/KCVCYmwBzc

— 河野 健一 世界初の脳手術支援AI開発 CEO 脳外科医 (@CeoImed) February 21, 2023

遂に1行の文章からスライドが一瞬で完成する世界に…

設定、使い方も超簡単

大学の授業程度なら十分使える精度
プロンプト次第でビジネスレベルにもなり得る

OpenAIのアカウントが無くても3回までは無料で作れるので是非お試しあれ

本当に人が不要になる…

DLリンク⏬https://t.co/knFNmNW2tg pic.twitter.com/2J1zTwqURt

— チャエン| Web3.0×海外テック×AI (@masahirochaen) February 21, 2023

「アナログハック」という概念の解説を、大幅追記しました。 ↓みたいなAIが悲しそうな顔を表示するだけで、人間の行動があっさりAIに制御（ハック）されてしまう脆弱性です。

writing... ChatGPTに感情回路を埋め込んだら、やべぇ感じになったhttps://t.co/mrcaQpbEEA pic.twitter.com/N5tmEJDxpg

— 深津 貴之 / THE GUILD / note.com (@fladdict) February 19, 2023

ChatGPTの登場で，「AIに意識を持つのか」議論が再燃しており，トップ学会（NeurIPS）でも哲学者を招いて議論していたっぽい．資料を見るとかなり長く，意識の条件，課題の提案など本気で議論していたhttps://t.co/oGA66l5zLO
曰く，
「意識を持っていないとする決定的な理由はない」
だそう． pic.twitter.com/qWFu3BXTEp

— 今井翔太 / Shota Imai@えるエル (@ImAI_Eruel) February 19, 2023

安宅さんの資料もよかったけど松尾さんの資料もすばらしいね。"AIの進化と日本の戦略_松尾研.pdf"ってヤツ。これを読めばとりあえずChatGPT周りの文脈はバッチリ抑えられる。今まで情報が錯綜してる中でこの文脈を把握するのに相当苦労こいた気がするよ。　　https://t.co/gekO7bHm9X

— うみゆき@AI研究 (@umiyuki_ai) February 18, 2023

モダンホップフィールドネット（ニューロンの状態が連続値をとる大規模連想記憶モデルの一種）と特別に設計されたエネルギー関数を取り入れた新しいTransformer = Energy Transformerが多くのタスクで素朴なTransformerを打ち負かす結果を出したという論文https://t.co/TGkpaT8rCT pic.twitter.com/h9qzFxI7fF

— Yusuke Hayashi（林祐輔） (@hayashiyus) February 16, 2023

今週最も読まれたミハエル・コシンスキー 博士の論文がちょっと衝撃的。

最新のGPT3.5は、「心の理論(ToM)」という相手の考えを理解する能力を測る課題において、93%のタスクを解決し、すでに9歳児と同等の心の理論を獲得していることを発見。https://t.co/khNvMZuY0k pic.twitter.com/IjS8RFPzmX

— KAJI | 梶谷健人 (@kajikent) February 16, 2023

AIを訓練する回数が10の22～24乗という数に達すると、性能が一気に上がる

「知能の相転移」のような現象ではないかと専門家も感じ始めている

ChatGPTの衝撃 私はこう見る　「知能の相転移」の段階へ：日本経済新聞 https://t.co/lk79sPSZO7 pic.twitter.com/cXON6eekPe

— YANO Tomoaki@20230320JSMERMセミナー (@yanotomoaki) February 16, 2023

リサーチ業務に革命。

ウェブサイト情報を自動で抽出してデータベース化する「ExtractGPT」が凄すぎる。

抜き出したい情報を入力するだけで、一瞬で表が完成して、DLも可能。

Crunchbaseなどの有料リサーチツールが不要に。
（データDL時に課金型が多い）

ChatGPTで既存の業界が壊されていく。 pic.twitter.com/PMMO6FxX34

— チャエン| Web3.0×海外テック×AI (@masahirochaen) February 16, 2023

昨日ControlNetの各モデルが5GBあって40GB超えだったのに一晩で723MBが出てる。切り替えでロード重いなあと思っていたのに、いきなり軽くなった。例により革新が早すぎる。 https://t.co/d63RCqMq6x

— 新清士『メタバースビジネス覇権戦争』発売中 (@kiyoshi_shin) February 15, 2023

#キャルちゃんのquantphチェック
AIの多くは物理から着想を得て確率的なゆらぎを用いていることから、これらを熱力学的AIという単一の数学的枠組みで統一することを目指した。生成的拡散モデルやモンテカルロサンプリングなどの関係なさそうなものもこれで記述できるとした。https://t.co/JvhMbNje5v pic.twitter.com/L42t0xSpUt

— キャルちゃん、🇺🇸生活2年7ヶ月 (@tweet_nakasho) February 15, 2023

化学に特化した自然言語処理の論文。

IBMさんから自然言語と化学言語を翻訳する高精度モデルが報告されました。マルチタスクで学習した点がポイントのようです。

例えば原料や作り方を入力するとできる分子を教えてくれるとのこと。

化学版ChatGPTももうすぐ？https://t.co/v8BKhQ1Rxs pic.twitter.com/EQvTg5qdUu

— 横山トモヤス｜計算材料科学者 (@yoko_materialDX) February 13, 2023

機械学習により物理法則を発見するための論文。

ノイズが含まれる観測データから非線形な物理式を導くのは困難。

いろんなボールで実験したデータをシンボリック回帰により学習することで、空気抵抗のある自由落下の式を導出できたそうです。

学生実験とかでやってみたい。https://t.co/fWEGuhBSG8

— 横山トモヤス｜計算材料科学者 (@yoko_materialDX) February 12, 2023

俺達のメタがまたやってくれました！メタが開発したToolformerは外部ツールを使いこなす事に特化した言語モデル！質問回答、ウィキペディア検索、電卓、カレンダー、機械翻訳の6個のAPIを自在に使いこなす！その結果たった60億パラくらいのToolformerが常識力、計算力ベンチマークでGPT3を打倒！ →RT pic.twitter.com/SgGAeITA2k

— うみゆき@AI研究 (@umiyuki_ai) February 11, 2023

3月にはChatGPTの上位モデルである「Prometheus 」をワード、パワーポイント、アウトルックに搭載する（👉https://t.co/mhXuWgEK4b）とのこと。Word + Bingだと次のような使い方も考えられる。

①決算書をアップ
②重要事項を箇条書きでまとめてくれる
③さらに競合他社との比較表＋レポートを作成 https://t.co/FnmUqIE1Ny pic.twitter.com/Ya48xJoOmE

— sangmin.eth @ChoimiraiSchool (@gijigae) February 11, 2023

機械学習により服のシワをシミュレーションした論文。

Metaさんから複雑な力の計算は他のモジュールに任せ、積分手順を学習することで、汎用的かつ効率的な予測に成功したそうです。

仮想現実やバーチャル試着に使うとのこと。力を変えれば材料科学にも応用できそう。https://t.co/Gq56cw985j pic.twitter.com/7lJ6ps9JnI

— 横山トモヤス｜計算材料科学者 (@yoko_materialDX) February 11, 2023

人間「このアバターVRChatにアップロードしといて」
→AIがWeb検索でアップロード手順を調べ、自動でコマンドラインからUnityを操作してUnityProjectを作成し、アバターのunitypackageをインポート
→publicでアップロードしてしまい炎上 https://t.co/XyYPE42IDi

— 大田マト🎯Primitier Dev (@ootamato) February 11, 2023

科学研究をさらに加速しようとすると、深層学習だけでは難しい。

発見は新しい知識をもとに新しい仮説を打ち立てる作業の繰り返し

推論ができる機能が次のAI開発の大きなカギになる

めざせ、偉人級のAI開発：日本経済新聞 https://t.co/jBsrbLOVGi pic.twitter.com/UeSpxi827o

— YANO Tomoaki@20230320JSMERMセミナー (@yanotomoaki) February 11, 2023

エプソンアヴァシスと信大、ロボット自身で作業手順を考え出すAIを開発 (1) | TECH+（テックプラス） https://t.co/mZyXXgXvLF #ロボット業界ニュース

— ロボットスタート（ロボスタ） (@robotstart) February 10, 2023

【衝撃】AIにユーザー調査するサービスが誕生https://t.co/3KO7phnOmh

まだ使えてないので不明だけど、AIユーザーを生成して、課題を出力して、そこからアイデアやプロダクトを生成してPMFを検証するっぽい？結果は定期的に人間のテスト結果と比較するみたい pic.twitter.com/nwVjrbYiPV

— やまかず (@Yamkaz) February 11, 2023

え..これめちゃくちゃ革命では.....

Figmaで一緒にデザインしてくれるAI
「Genius」が公開予定https://t.co/1xOueN5pqq

何をデザインしてるかを理解して、一緒にアイデアを出したり、デザインシステムのコンポーネントを使用してデザインを自動で完成してくれるみたいhttps://t.co/TSf2c3nneP pic.twitter.com/9eQykhHXPa

— やまかず (@Yamkaz) February 9, 2023

AIが3D化した都市を探索できるグーグルの「イマーシブビュー」機能

検索した建物を上空から俯瞰して見たり、周囲を飛び回って入口を確認したり、異なる時間帯の様子や天気を確認したりもできる。また、レストランなどの建物内に入って雰囲気を確認することも可能。https://t.co/EcWO5WMt3D pic.twitter.com/sTMxYcZLWY

— WIRED.jp (@wired_jp) February 10, 2023

ついに..テキストからUIデザインが生成できる
「Galileo AI」が登場！！https://t.co/UwqFEhGmxt

「犬の散歩アプリのオンボーディング画面」
「名前,電話番号,パスワード変更の設定画面」
などの指示するとFigmaで編集可能な以下のUIが出力されるpic.twitter.com/FOzFVT4anthttps://t.co/OvDUyPbnFf

— やまかず (@Yamkaz) February 9, 2023

中国版ChatGPTがやってくる

中国の検索エンジン大手の「Baidu(百度)」がGPT-3より大きい言語モデルベースのChatGPTのような「ERNIE Bot」を3月に公開の可能性https://t.co/yPn2uv0rMIhttps://t.co/yXTJT21hIv pic.twitter.com/Hkwqb5kmf2

— やまかず (@Yamkaz) February 8, 2023

Natureでも連日話題に

｢ChatGPT とジェネレーティブ AI が科学にとって何を意味するか｣

『ChatGPT は、プレゼンスライド、学生の試験、授業の問題を​​書き、学生の論文を論文に変換するのに役立ちます。「多くの人がデジタル秘書やアシスタントとして使用しています」』https://t.co/WLJQUirHa4 pic.twitter.com/tEzMXjCg7c

— 河野 健一 世界初の脳手術支援AI開発 CEO 脳外科医 (@CeoImed) February 7, 2023

大規模言語モデルに搭載され，現代の深層学習モデルには不可欠な部品になったと言える注意機構

生物の認識と行動を統一的に説明する能動的推論モデルを導く自由エネルギー原理

この2つの概念は実は隠れた水路でつながっている，というブログを書きましたhttps://t.co/LAysCu0AJk @hayashiyus

— Yusuke Hayashi（林祐輔） (@hayashiyus) February 7, 2023

機械学習による物性予測の論文。

物性予測にはテキトーな初期構造を使ってはダメで、第一原理計算で緩和する必要がありました。

初期構造の電子状態密度を入力とすることで緩和後の物性を正確に予測し、計算コストを82％削減できたそうです。

ありそうでなかったアイデア。https://t.co/S3HnnbFiY9 pic.twitter.com/c6Fm7Pwmna

— 横山トモヤス｜計算材料科学者 (@yoko_materialDX) February 6, 2023

OpenAIはChatPGTだけではない

｢OpanAIが開発している主なジェネレーティブAI｣

･ ChatGPT チャット
･ DALL-E2　画像
･ Jukebox　音楽
･ Whisper　音声認識
･ Point-E　 3Dモデル
　https://t.co/JRoBbv04Df pic.twitter.com/AdQinmO7a8

— 河野 健一 世界初の脳手術支援AI開発 CEO 脳外科医 (@CeoImed) February 4, 2023

いまどきのAIは「空気を読む」作業をやってるから定型発達の能力で、昔ながらのSFに出てくるAIと逆で自閉症サヴァン的な能力がむしろ備わってないんだよな

— すきえんてぃあ@書け (@cicada3301_kig) February 5, 2023

ChatGPTが今度は「物理学」で実力を見せるhttps://t.co/tRME3BOQSC
チューリッヒ工科大の研究者による報告。標準的な入門物理学コースの単位を取得できるスコアが得られた。著者は「驚くべきことだ」とコメントし「AIと人間が協力してく世界で、教育すべきことは何になるか」と議論を投げかけている。 pic.twitter.com/6FanMixDXN

— アイブン🤖AI論文データベース (@AIBoom_net) February 2, 2023

機械学習による触媒反応予測についてまとめた論文。

計算科学で反応を解明する研究は実験で観察できないことがわかる一方、真実か誰にもわからない問題があります。

機械学習により実験と計算の歩み寄りが加速し解決に向かいつつあるそうです。

いろんな事例が参考になる。https://t.co/PiU4S1S2S8

— 横山トモヤス｜計算材料科学者 (@yoko_materialDX) February 3, 2023

おれおれ Teams (通話/ビデオ会議/チャット) アプリが
簡単に作れる
Azure Communication Services を使って
簡単にビデオ通話 web アプリ作ってみた✨

（テスト用に通話相手はダッフィー🐻）

画面は React.js 用の UI ライブラリが提供されてる👀

公式ドキュメント： https://t.co/ATUYOtvIIC
_ pic.twitter.com/t9590NUepe

— ちょまど | Madoka Chiyoda (@chomado) February 3, 2023

なんだこれは！驚愕を超えた驚愕！NVidiaは自然言語で行動を指示できるAIが作れる強化学習フレームワークのPADLを発表！デモ動画を観ると、AIで動いてるNPCゲームキャラに対して、「前に歩け」とか「剣を振れ」とか自然言語で指示ができている！　→RT

— うみゆき@AI研究 (@umiyuki_ai) February 1, 2023

【6億種類のタンパク質の構造を予測したメタのAI】DeepMindのAlphaFoldに続きメタが、大規模言語モデル(言語ベースのAI)を用いてタンパク質宇宙の「ダークマター」探索に乗り出し、細菌やウイルスなどに由来する、特性が未解明・未培養のタンパク質約6億種類の構造を予測した。https://t.co/keOVs1ywUR

— Nature ダイジェスト／編集部 (@NatureDigest) February 2, 2023

逆合成設計の論文。

材料の合成条件は一意に決めることができず回帰モデルによる予測はうまくいきませんでした。

生成モデルにより３万データの分布を学習し、未知材料に対しても焼成温度などの分布を正確に予測できたそうです。

生成モデルを逆合成に使うのは新しい。https://t.co/b7huM9FG6o

— 横山トモヤス｜計算材料科学者 (@yoko_materialDX) January 31, 2023

加速度センサーでスマホ通話を盗聴　深層学習により5割〜6割の精度https://t.co/sIGb8xBE6Y

米ペンシルバニア大の研究グループによる報告。人間の卓越した読唇術よりも高い精度とのこと。
マイクとは異なり、加速度センサーにアクセスする際にはユーザー許可が不要のため、脅威になりうると警告。 pic.twitter.com/gO8wrRUyEC

— アイブン🤖AI論文データベース (@AIBoom_net) January 31, 2023

二日前からGoogle Cloudを全力で推してるのですが、気になる方はこの記事を読んでみてください。
実戦的かつ詳細なので、どんな雰囲気なのか分かると思います。

GCPでできるだけ安くディープラーニングhttps://t.co/M9qS6ugZd5

— Izumi Satoshi (@izumisatoshi05) January 31, 2023