![](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="600" height="200"><rect fill-opacity="0"/></svg>)
![プロフィール画像を開きます](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="200" height="200"><rect fill-opacity="0"/></svg>)
論文被引用数，約４０万すごいな
引用ツイート
![](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="24" height="24"><rect fill-opacity="0"/></svg>)
シェイン・グウ
@shanegJP
イリアさんは最強の研究者であり、超素直で面白い人です。7年半前、私がGoogleでの最初の上司、研究のいろはを教えてくた恩師です。その時GoogleをやめOpenAIを創業したので私が彼の最後のGoogleでの弟子になります。7年の時間を経てまた彼と働けるのは最高です。いつか彼の話をしたいですね。 twitter.com/jaguring1/stat…
このスレッドを表示
はかせチャン
はかせチャン
5,692 件のツイート
新しいツイートを表示
はかせチャンさんのツイート
![正方形のプロフィール画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="48" height="48"><rect fill-opacity="0"/></svg>)
「主人公を守ろうとする姿勢に共感し、その命運に思わず涙しました」
小学5年生が提出した読書感想文。
AIの「ChatGPT」を使って書かれたものでした。
影響が出始めている教育やビジネスの現場。その最前線を追いました☟
www3.nhk.or.jp/news/html/2023
![画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="640" height="360"><rect fill-opacity="0"/></svg>)
www
引用ツイート
ひろゆき
@hirox246
世界中が大騒ぎしてるGPT-4を搭載した英知が「AIひろゆき」という、どうでもいいコンテンツに使われてる世界線へようこそ。 twitter.com/ai_hirox246/st…
これってGPTのようなpretained modelを強化学習でチューニングしてchatGPT的にする学習についての話なんだとおもいますが，学習効率がえらい良くなってますね．
引用ツイート
マイクロソフトDeepSpeed
@MSFTDeepSpeedJP
ChatGPTスタイルのモデルを訓練できるDeepSpeed-Chatを公開しました！ GPU1台で100億超パラメータを、複数GPUなら1000億パラメータ超のモデルを学習できます。SoTAの15倍以上の高速な学習をスクリプト一つで実行でき、簡単かつ低コストです！（日本語記事も間もなく公開予定）github.com/microsoft/Deep
このスレッドを表示
![DeepSpeed-Chat: Easy, Fast & Low-Cost Training of ChatGPT-like Models](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="680" height="401"><rect fill-opacity="0"/></svg>)
画像の説明を読む
ALT
ボクも同じ感じにコード書く時に活用してる。オプションやクラス名忘れててもいいし、Rでこう書くのはPythonならどうなるみたいな時、いちいちググッたりする手間が大幅に省力化できる
引用ツイート
HELLO CYBERNETICS
@ML_deep
chatGPTふつうにコーディングに活用させてもらっている。完璧なものを要求するのは全く持って無理なのだけど、雛形的なのは提案してくれるし、そこから新しい書き方など学べたりする。デバッグは必要だけど、だいぶ１から書くより楽だよね。マウス操作がだいぶ少ない超効率的検索エンジン。
このスレッドを表示
これは，ぴえん
引用ツイート
Kohei Suenaga
@ksuenaga
「アドバイザ面談？ああ，あれって何を言われたか覚えてませんね．あれって意味あるんですか？」と研究室の学生に言われたが，君のアドバイザをしていたのは私だ．
1万GPUとか，60万GPUって，やばい．この規模になってくると，たとえば「学習効率を１０倍にする研究」がこれまでの体感以上に重要だな
引用ツイート
Satoshi Matsuoka
@ProfMatsuoka
例えばGPT4学習のスパコンは一万GPU(一説には2万5千)構成と言われますが、これはTop500では世界三位のスパコンLUMIと同じです。一方GPT3からGPT4への計算規模は60倍で、仮にGPT5が同様の計算規模の進化が必要だとすると、60万GPUのマシンが必要ですが、400MWの電力が必要になります。
このスレッドを表示
![画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="270" height="360"><rect fill-opacity="0"/></svg>)
言語モデルのトレーニング、最後は人力で評価モデル作ってるし、文系人材は超重要と思います
引用ツイート
Kazuki Fujisawa
@kazu_fujisawa
これからのAI時代、私立文系みたいなんはダメだ、と、また私文憎しで言ってる人が多いんだが、思うんだけど、AIの最後のトレーニングは、ポリコレとか個人情報とか、どうしても人手が必要そうで、そういうこところに現代文・英語・世界史勉強した私文とかめちゃ使えそうじゃんねぇ…。
このスレッドを表示
![画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="626" height="680"><rect fill-opacity="0"/></svg>)
OpenAI CEOのアルトマンが政府に対してOpenAIやChatGPT, GPT-4について説明した際の資料が公開されました．
これは大変貴重な資料です．OpenAIのCEO自らが公に国に対しOpenAIのスタンスや，GPTの技術・応用可能性について説明したのは，ChatGPT登場以降初めてなのでは
note.com/akihisa_shioza
![画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="680" height="378"><rect fill-opacity="0"/></svg>)
![画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="360" height="201"><rect fill-opacity="0"/></svg>)
![画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="360" height="199"><rect fill-opacity="0"/></svg>)
![画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="510" height="680"><rect fill-opacity="0"/></svg>)
ブラウン運動の話を出すなら、紅茶にミルクを入れた時、混ざる様子を拡散過程、それの時を戻す方法が逆過程と説明した方がイメージが沸きやすいと思いました。
引用ツイート
はかせチャン
@hshimodaira
画像生成AIのプロンプト、数理の力で最強呪文を探す！っていう講義やります。#KU数理工学概論
![画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="680" height="523"><rect fill-opacity="0"/></svg>)
このスレッドを表示
返信先: さん
最適化の研究を進めていて、それが上手く行けば一年ぐらいになりますが、それでも一年です。富岳は演算よりHPC一般のボトルネックであるメモリ性能に資源を割いているので仕方がありません。GPT4を2-3ヶ月で学習させるには、(できれば富岳の隣に)それに特化したGPUスパコンを構築する必要があります。… さらに表示
![画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="679" height="438"><rect fill-opacity="0"/></svg>)
科学技術分野の文部科学大臣表彰・若手科学者賞を受賞しました。業績名は「深層学習によるデータ解析原理を記述する統計理論の研究」です。
お世話になった皆様に御礼申し上げます。今後ともよろしくお願いします。
![](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="680" height="356"><rect fill-opacity="0"/></svg>)
Twitterを使ってみよう
今すぐ登録して、タイムラインをカスタマイズしましょう。
![画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="180" height="240"><rect fill-opacity="0"/></svg>)
![画像](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="240" height="184"><rect fill-opacity="0"/></svg>)