OpenAI Evals

AI eval ツール: OpenAI Evals — 本家の評価基盤はいま

2026年3月23日

OpenAI Evals は GPT 評価の事実上の標準として 2023 年に登場した OSS フレームワークです。本稿では OSS 版（github.com/openai/evals）と OpenAI Platform 側の evals、両方の現状と使い分けを整理します。YAML registry、model-graded eval、GPT-as-judge テンプレートの仕組み、最小動作例、他ツールとの棲み分け、そして OpenAI へのベンダーロックや開発ペース低下といったハマりどころまで、2026 年時点の実装者視点でまとめます。