AI eval ツール Ragas: RAG 評価に特化した OSS フレームワーク
2026年3月29日
Ragas は RAG (Retrieval-Augmented Generation) 評価に特化した OSS です。faithfulness、answer relevancy、context precision、context recall、context entity recall という 5 つの代表的 metric を揃え、合成テストデータ生成も備えます。LangChain / LlamaIndex 連携や最小動作例、ハマりどころまでをまとめました。
tech-blogAI evaluationRagas
HtmlRAG: HTML is Better Than Plain Text for Modeling Retrieved Knowledge in RAG Systemsの紹介
2024年11月16日
HtmlRAGの論文を詳細解説。従来のRAGシステムがプレーンテキストを使用するのに対し、HTML構造を保持することで質問応答の精度を向上させる新手法。HTMLクリーニング、ブロックツリー構築、HTMLプルーニングの3段階プロセスと実装例を紹介。トークン数を80,000から300に削減しながら構造情報を保持し、WebベースのRAGシステムに革新をもたらします。
LLMRAGhtml
書評：LangChainとLangGraphによるRAG・AIエージェント［実践］入門 (エンジニア選書)
2024年11月10日
LangChainとLangGraphによるRAG・AIエージェント開発の実践書を詳細レビュー。LLMの基礎からRAGの応用、マルチエージェントシステムまで網羅的に解説。LangChainのRunnable、LCEL、LangSmithを使った評価手法も紹介。日本語で学べる貴重なAIエージェント開発の参考書として、初心者から上級者まで全ての開発者におすすめできる一冊です。
BootCampLLMbook-review