バグ修正 / v2.1.299
plugin evalでAPI拒否が合格扱い
CHANGELOG 原文(英語)
Fixed claude plugin eval passing runs that the API refused: a run that ends on an API error now scores 0 without grading and makes the suite exit 1 公式の変更履歴を開く ↗ 日本語での補足
claude plugin evalが、APIに拒否された実行を合格にしていた問題を修正。APIエラーで終了した実行は採点せずに0点となり、スイートは終了コード1で終了するようになった。
関連ドキュメント
機能の基本的な使い方を確認できます。今回の変更は上の原文をご覧ください。