ログイン中のQiita Team
ログイン中のチームがありません

Qiita Team にログイン
コミュニティ
OrganizationイベントアドベントカレンダーQiitadon (β)
サービス
Qiita JobsQiita ZineQiita Blog
DeepLearning
深層学習
Attention
Self-Attention
自己注意
2
どのような問題がありますか?

投稿日

更新日

Attention Is All You Need の 『Attention』を1時間である程度理解する手段

概要

Attention Is All You Need の 『Attention』を1時間である程度理解する手段

を考えたので記事にする。

本来は、

Attention Is All You Need の 『Attention』を1時間で理解する手段

のつもりであったが、実践した結果、「ある程度」を追加した。

注意:深層学習の基礎知識があることが前提。

手段

簡単です。

以下の15分程度のYouTubue を、3回みる。

Deep Learning入門:Attention(注意)
[Neural Network Console のYoutube]

(ワタシは、Sonyさんとは、全く何の関係もありません。)

映像の例1:
image.png

映像の例2:
image.png

まとめ

すごくわかりやすい動画(相当、レベルが高い)のため、記事にした。
しかし、更に、理解を深めるためには、別途、勉強する必要あり。

余談:

  • 歩きながらスマホで音声だけ聞いたときに、ある程度、理解できたので、 映像も見れば楽勝かと思ったが、映像をみると、むしろ、わからない部分が明確に認識させられただけ?だった。
  • 2Hrで5回みることを提案しようとも思ったが、ちょっと、別途、その人がわからない部分を勉強しなと何度見ても限界があると思ったので、3回にした。

以下のワタシの記事も多少助けになるかも。

自己注意Self-Attention の解説でわかりやすいと思った記事N選 (まだ、N=5)

ユーザー登録して、Qiitaをもっと便利に使ってみませんか。
  1. あなたにマッチした記事をお届けします
    ユーザーやタグをフォローすることで、あなたが興味を持つ技術分野の情報をまとめてキャッチアップできます
  2. 便利な情報をあとで効率的に読み返せます
    気に入った記事を「ストック」することで、あとからすぐに検索できます

コメント

この記事にコメントはありません。
あなたもコメントしてみませんか :)
ユーザー登録
すでにアカウントを持っている方はログイン
記事投稿イベント開催中
マイクロソフト認定資格を取得する際の学習方法や経験談、おすすめ学習リソースなどを紹介しよう!
~
2
どのような問題がありますか?
ユーザー登録して、Qiitaをもっと便利に使ってみませんか

この機能を利用するにはログインする必要があります。ログインするとさらに下記の機能が使えます。

  1. ユーザーやタグのフォロー機能であなたにマッチした記事をお届け
  2. ストック機能で便利な情報を後から効率的に読み返せる
ユーザー登録ログイン
ストックするカテゴリー