DeepEval・RAGASで検索回答とツール呼び出しを評価する

DeepEval・RAGASで検索回答とツール呼び出しを評価する｜Karthik KK

ローカルLLMを動かし、回答・検索文脈・ツール利用を評価するテストを作る。

DeepEvalでテストケースと評価用データを管理し、GEvalの独自指標、RAG、複数のツール呼び出しを扱う。JupyterからPyTestへの移行を確認し、後半のRAGASは公開概要で対象を確認した。

原題：AI Agents, RAG & LLM Evals for Beginners: DeepEval & RAGAS

学習・評価用データ：期待出力・実際の回答・検索文脈を用意し、関連性や独自基準を評価する。／確認 2026-09-15／https://www.udemy.com/course/ai-testing-deepeval-ragas-ollama/

学習・エージェントのテスト：計算・検索ツールの呼び出しを、記録したケースと実際のアプリで確認する。／確認 2026-09-15／https://www.udemy.com/course/ai-testing-deepeval-ragas-ollama/

学習・テストの整理：評価設定をPyTestのfixture等にまとめ、複数ケースで実行する。／確認 2026-09-15／https://www.udemy.com/course/ai-testing-deepeval-ragas-ollama/

対象：基本的なプログラミング経験があるQA担当者とAI開発者。形式：オンデマンド動画講座（公開シラバスを確認）。言語：英語（日本語字幕の対応は未確認）。利用条件：一部講義にプレビューの案内あり。全講座の受講条件・現在価格はUdemyで確認。

確認事項（編集部）：Pythonの基礎があると進めやすい。ローカルモデルの使用と、Confident AIへのデータ送信・外部APIの利用は別であり、すべての演習が無償・端末内完結とは扱わない。未展開の7章は詳細を確認していない。

出典：Karthik KK / Udemy「AI Agents, RAG & LLM Evals for Beginners: DeepEval & RAGAS — 講師公開の講座概要・シラバス」／公開・更新日：ページで特定せず／確認日：2026-09-15／https://www.udemy.com/course/ai-testing-deepeval-ragas-ollama/

DeepEval・RAGASで検索回答とツール呼び出しを評価する

関連ページ