AlignEval：让 LLM 评估器搭建更简单、自动化的应用

Eugene Yan 推出 AlignEval，一个把搭建 LLM-evaluator 简化为上传 CSV、二分类标注、编写评估标准、用 dev-test 切分优化四步的应用，已集成 LangSmith。它主张先从数据出发而非预设标准，避免不可达或无关的评估准则，支持 gpt-4o-mini 与 claude-3-haiku，标注 20 条后可解锁评估模式。