![](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="600" height="200"><rect fill-opacity="0"/></svg>)
Pinned Tweet
![](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="48" height="48"><rect fill-opacity="0"/></svg>)
meta翻訳についてQiitaで記事にしてみました。
個人開発で高精度な機械学習サービスをリリースすることについて主に書いています。
![](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="680" height="357"><rect fill-opacity="0"/></svg>)
1
152
608
goto@meta翻訳開発者
goto@meta翻訳開発者
1,743 Tweets
![Opens profile photo](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="200" height="200"><rect fill-opacity="0"/></svg>)
Follow
Click to Follow goto_yuta_
goto@meta翻訳開発者
@goto_yuta_
某CEO 「日本語くらい日本のサービスが最強でありたい」と思って世界最高のmeta翻訳を個人で開発しました。(リンク貼ってあります) 内側の技術とか、AIの話とかを呟いてます。 お仕事などの依頼はDMまで。 京大情報/NLP
goto@meta翻訳開発者’s Tweets
検索エンジンの新しい形らしいけど、これ凄いな。
"Here’s a cool reserch paper about large language models"って入力すると、それらしき論文がずらって表示されてる...
metaphor.systems
![Image](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="360" height="327"><rect fill-opacity="0"/></svg>)
![Image](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="680" height="500"><rect fill-opacity="0"/></svg>)
1
6
18
2003年にニューラル言語モデルは登場してて、当時は実用化なんて夢物語だったらしい。
アーキテクチャが多層パーセプトロンからTransformerに変わったこと以外は大枠は変わってないのに、えげつない進化を遂げてChatGPTが登場したりしてるのなんか感動...
jmlr.org/papers/volume3
![Image](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="679" height="368"><rect fill-opacity="0"/></svg>)
![Image](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="679" height="441"><rect fill-opacity="0"/></svg>)
12
57
かの有名なヒントンが"Forward-Forwardアルゴリズム"とかいうニューラルネットの新しい学習手法提案してる。
普通はforward-backward順に学習するところを2つのforwardパスに置き換えて学習するらしく、斬新すぎて一旦よくわからんからちゃんと読んでみよう。
cs.toronto.edu/~hinton/FFA13.
![Image](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="644" height="680"><rect fill-opacity="0"/></svg>)
54
220
かの有名なヒントンが"Forward-Forwardアルゴリズム"とかいうニューラルネットの新しい学習手法提案してる。
普通はforward-backward順に学習するところを2つのforwardパスに置き換えて学習するらしく、斬新すぎて一旦よくわからんからちゃんと読んでみよう。
cs.toronto.edu/~hinton/FFA13.
54
220
chatGPTに対して、「こんなものAIと呼べるか！！」みたいな苦言を呈している年配の方をよく見かけるけど、どんだけ凄いもの作ったらAIと呼んでくれるんですか・・・
1
19
エンジニア採用関係者からよく聞くけど、コードを書くのが好きかと聞かれた時に、「〜〜が嫌い」と言ってくる人の方が強いエンジニアなことが圧倒的に多いらしい。
1
22
87
このツイートすげえ...
今年の目立った機械学習系の論文のまとめがずらっとスレッドになってる...
Quote Tweet
![](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="24" height="24"><rect fill-opacity="0"/></svg>)
Jim (Linxi) Fan
@DrJimFan
Excited to go to NeurIPS conference tomorrow! It's an annual gala for AI. Many revolutionary ideas debuted here, like AlexNet, Transformer, & GPT-3.
I read *all 15* Outstanding Papers and can’t wait to share my thoughts with you all. Here's your front row seat to the festival:
Show this thread
![Photo of a robot receiving an award at a big conference, illustration, beautiful, geometric, trending on artstation, full body, cinematic. - DALLE2 prompt](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="680" height="680"><rect fill-opacity="0"/></svg>)
read image description
ALT
45
173
言語モデルで起こりがちな「橋本環奈は4/1日生まれだ」みたいなHallucination(自然な文章でも間違った情報を出力)をコーパスから調べて修正してくれる手法を提案してる論文。
arxiv.org/abs/2210.08726
![Image](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="541" height="680"><rect fill-opacity="0"/></svg>)
1
39
202
翻訳カフェ初参加。
自分は機械翻訳は使えても翻訳業界知らなすぎると思った...
1
1
10
![](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="680" height="383"><rect fill-opacity="0"/></svg>)
最近、LearncommunolizerっていうYoutubeチャンネルにハマってる。
見た目からちょっと面白そうな数学の問題が揃っててついつい解いてしまう。
学校の教科書もこういう問題増えればみんなもう少し数学好きになるのに・・・
![Image](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="680" height="379"><rect fill-opacity="0"/></svg>)
5
27
訓練データに何混ざってるねんw
Quote Tweet
ワクワクさん
@mosko_mule
すごい、ChatGPT上で機械学習ができる！
Show this thread
![Image](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="672" height="680"><rect fill-opacity="0"/></svg>)
3
10
スラダン映画おもろいという噂まじ？？いこかな、、、
1
AIの学習データが近々枯渇すると言われてAI研究に効率化が必要と言われてる中で、Stable Diffusionを20倍効率化するという中々の希望の光が見えてきてて凄い
Quote Tweet
Emad
@EMostaque
Distilled #StableDiffusion2
> 20x speed up, convergence in 1-4 steps
We already reduced time to gen 50 steps from 5.6s to 0.9s working with @nvidia
Paper drops shortly, will link, model soon
Will be presented @NeurIPS by @chenlin_meng & @robrombach
Interesting eh 
twitter.com/emostaque/stat…
twitter.com/emostaque/stat…Show this thread
![Image](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="680" height="606"><rect fill-opacity="0"/></svg>)
4
16
chatGPTに衝撃を受け、openAIの最近の論文を漁りに行ってみたが、全部しょぼく見える。
技術的に新規性があるはずなのにとにかくchatGPTのせいでしょぼく見える...
7
40
最近の衝撃だった話はGoogleがTransformerに特許をとっている件。
TensorflowでTransformerをサービスに利用しても大丈夫だけどPytorchでサービス化するとアウトらしい。
3
213
809
Qiitaの情報は基本間違ってるみたいな扱いされてて草
Quote Tweet
へっぽこ
@heppoko
この方向性なら使えそうか（使えそう、とは）
![Image](data:image/svg+xml,<svg xmlns="http://www.w3.org/2000/svg" width="680" height="657"><rect fill-opacity="0"/></svg>)
3
11
New to Twitter?
Sign up now to get your own personalized timeline!