Новое в Claude Code: claude plugin eval 🎉 Теперь можно посмотреть, какую пользу на самом деле приносит ваш плагин и не требует ли он доработки. Можно создать тестовые случаи, прогнать на них плагин или навык, оценить результаты, а затем повторно запустить каждый тест уже без плагина и сравнить разницу. Начните в папке вашего плагина и выполните: claude plugin eval init Вы объясняете Claude, как выглядит хороший и плохой результат, и даёте несколько реальных промтов. Claude сам набрасывает тестовые случаи и проверки, делает пробный прогон набора и сообщает, сколько будет стоить полный запуск. Затем выполните: claude plugin eval В терминале вы увидите оценку каждого тестового случая с вашим плагином и без него, а также получите HTML-отчёт со всеми подробностями. Если ваш аккаунт это поддерживает, отчёт также публикуется как приватный артефакт. Проверки вызывают модель, поэтому расходуют токены, а результаты могут отличаться от запуска к запуску. Перед полным прогоном сначала сделайте пробный запуск через: --runs 1 Хуки и MCP-серверы вашего плагина выполняются от вашего имени, поэтому проверяйте только те плагины, которым доверяете. Чтобы попробовать функцию, выполните: claude update https://code.claude.com/docs/en/plugin-evals
Материал агрегирован из первоисточника:
Telegram — Вайб-кодинг
Читать полностью в Telegram — Вайб-кодингНовое в Claude Code: claude plugin eval 🎉
Новое в Claude Code: claude plugin eval 🎉 Теперь можно посмотреть, какую пользу на самом деле приносит ваш плагин и не требует ли он доработки. Можно создать тестовые случаи, прогнать на них плагин или навык, оценить результаты, а затем повторно запустить каждый тест уже без…
Кратко от AI: Главные тезисы
- Новое в Claude Code: claude plugin eval 🎉 Теперь можно посмотреть, какую пользу на самом деле приносит ваш плагин и не требует ли он доработки
- Можно создать тестовые случаи, прогнать на них плагин или навык, оценить результаты, а затем повторно запустить каждый тест уже без…
Новое в Claude Code: claude plugin eval 🎉
Похожие материалы
Если ваш AGENTS.md успел устареть, Claude Code может заметить, что документация уже расходится с реальным кодом, и вс...
Если ваш AGENTS.md успел устареть, Claude Code может заметить, что документация уже расходится с реальным кодом, и всё же продолжить следовать старым инструкциям. Исследователи намеренно создали такую ситуацию и провели 80 запусков. В 79 случаях Claude Code распознал…
Дизайнер выложил в открытый доступ свой рабочий скилл для создания лендингов. Всего за один день его добавили в закла...
Дизайнер выложил в открытый доступ свой рабочий скилл для создания лендингов. Всего за один день его добавили в закладки более 8 000 человек. 🫠 Скилл берёт на себя почти всю основу страницы: структуру, тексты, шрифты и отступы. Чтобы установить его в Claude Code и сразу…
Так могут выглядеть учебники будущего
Так могут выглядеть учебники будущего: Парень при помощи Claude Opus 5.5 и Three.js превратил обычный статичный учебник по физике в полноценную интерактивную 3D-среду для обучения. Теперь физические явления можно не просто читать и рассматривать на картинках, а буквально…
На связи Paragon — подводим итоги дня!
На связи Paragon — подводим итоги дня! Главное за сутки🟠25.10 🟠Rippling — ушёл с Claude на OpenAI из-за цены 🟠Uber — ChatGPT Work для 30 тысяч сотрудников 🟠Claude и Theorem — 123 библиотеки проверены доказательством 🟠NVIDIA OpenShell — агента остановят за миллисекунды…