ME News ニュース、4月20日（UTC+8）、LangChainコミュニティは最近、LangSmithプラットフォームでLLM-as-Judgeを使用した大規模自動評価に焦点を当てた技術ガイドを公開しました。このガイドはSimon Budziakによって執筆されており、使用した方法による評価結果と人間の判断の一致率が85％に達していると述べています。ガイドでは、自己改善を目的としたキャリブレーションを実現するAlign Evals機能も紹介されています。記事には完全なガイドの閲覧リンクが添付されています。（出典：InFoQ）
LangChainリリース技術ガイド：LangSmithにおけるLLM-as-Judge自動評価の詳細解説