Encoder-only TransformerとRAG

Encoder-only TransformerとRAG｜StatQuest with Josh Starmer

3:30から埋め込み、11:15から位置符号化、12:39からAttentionを説明。

15:17から応用例、16:19からRAGでの利用を扱う。

公開日：2024-11-18。長さ：1132秒。確認範囲：概要・章立て。視聴前の目安（編集部）：Transformer、埋め込み、Attention

原題：Encoder-Only Transformers (like BERT) for RAG, Clearly Explained!!!

学習内容・前半のテーマ：3:30から埋め込み、11:15から位置符号化、12:39からAttentionを説明。／確認 2026-09-15／https://www.youtube.com/watch?v=GDN649X_acE

学習内容・後半のテーマ：15:17から応用例、16:19からRAGでの利用を扱う。／確認 2026-09-15／https://www.youtube.com/watch?v=GDN649X_acE

対象：AIのモデルと実装を体系的に学びたい人。形式：YouTube動画（個別教材）。言語：英語。日本語の要点は本資料庫で作成。日本語字幕・吹き替えの有無は視聴時に確認。。利用条件：YouTube公開動画。外部の書籍・会員サービス・実行環境は別条件。

確認事項（編集部）：必要な前提知識を確認し、概要だけで理解が済んだとせず元の説明と計算例を参照する。

出典：StatQuest with Josh Starmer「Encoder-Only Transformers (like BERT) for RAG, Clearly Explained!!!」／公開・更新情報：2024-11-18／確認日：2026-09-15／https://www.youtube.com/watch?v=GDN649X_acE

Encoder-only TransformerとRAG

関連ページ