DeepEval или LiteLLM Multi-Model API
DeepEval: пакет плагинов для ИИ-инструментов разработки, издатель confident-ai. Витрин, которые мы читаем и где он опубликован: 2 (Claude Code: claude-plugins-official, Community GitHub marketplaces). LiteLLM Multi-Model API: MCP-сервер, издатель BerriAI. Витрин, которые мы читаем и где он опубликован: 1 (Official MCP Registry). Данные нашего прохода по витринам на 2026-10-26. Эту пару выбрал читатель, а не наше правило сравнений, поэтому поисковикам предложено не индексировать страницу.
Где опубликован каждый
| Витрина |  DeepEval | |
|---|---|---|
| Claude Code: claude-plugins-official | Опубликован Версия: 1.0.0 Форки (GitHub): 2 135 Звёзды (GitHub): 19 112 Не помечен · Впервые замечен |
Нет на витрине |
| Official MCP Registry | Нет на витрине | Опубликован Версия: 1.0.2 Загрузки за месяц (PyPI): 162 Загрузки за неделю (PyPI): 55 Не помечен · Впервые замечен |
Каждое число принадлежит своей витрине и никогда не складывается с числами других витрин. Если витрина число не публикует, мы его не показываем: нет числа не значит ноль.
Факты рядом
| Факт | DeepEval | LiteLLM Multi-Model API |
|---|---|---|
| Витрины, где он есть (различается) | 2 (лучше) | 1 (хуже) |
| Звёзды (GitHub) (различается) | 19 112 | Нет цифры на GitHub |
| Форки (GitHub) (различается) | 2 135 | Нет цифры на GitHub |
| Последний релиз (различается) | 2026-10-16 | Не опубликовано |
| Где работает (различается) | Ставится как пакет плагинов | На вашем компьютере (litellm-mcp) |
| Транспорт (различается) | Не указано | stdio |
| Объявляет инструментов | Не опубликовано | Не опубликовано |
| Просит переменных окружения (различается) | Не опубликовано | 4, из них секретов: 3 |
| Части набора (различается) | 3 | Не набор |
| Лицензия (различается) | Apache-2.0 | Не указано |
| Репозиторий (различается) | github.com/confident-ai/deepeval | github.com/berriai/litellm-agent-mcp |
| Изменения за последние 7 дней | 0 | 0 |
| Впервые замечен | 2026-10-11 | 2026-10-11 |
Строки, где значения различаются, выделены фоном и жирным. Где сами данные говорят, какое значение лучше (больше витрин, большая цифра одной и той же витрины, более свежий релиз, отметка verified на витрине, где есть оба), лучшее дополнительно отмечено зелёным и ▲, худшее красным и ▼. Где работает, транспорт, инструменты, настройки, hooks, части набора, лицензия и изменения за неделю отмечены только как различие: больше или меньше само по себе не лучше.
Что каждый говорит о себе
DeepEval
Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.
LiteLLM Multi-Model API
Access 100+ LLMs with one API: GPT-4, Claude, Gemini, Mistral, and more.
Как запустить каждый
DeepEval Как плагин Claude Code
/plugin install deepeval@claude-plugins-officialLiteLLM Multi-Model API Как локальный MCP-сервер: пакет PyPI
claude mcp add --env "ANTHROPIC_API_KEY=<YOUR_ANTHROPIC_API_KEY>" --env "LITELLM_API_KEY=<YOUR_LITELLM_API_KEY>" --env "OPENAI_API_KEY=<YOUR_OPENAI_API_KEY>" --transport stdio litellm-mcp -- uvx litellm-mcpТребует: ANTHROPIC_API_KEY (секрет), LITELLM_API_KEY (секрет), OPENAI_API_KEY (секрет)
Команды построены только из того, что объявляют витрины; полный набор для всех клиентов есть на карточке каждого.
Какие инструменты объявляет каждый
Витрины ни одного из них не публикуют список инструментов, сравнивать нечего.
Какие настройки просит каждый
Витрины DeepEval не публикуют, какие настройки он просит, поэтому настройки не сравниваем.
Что умеет: DeepEval · Что умеет: LiteLLM Multi-Model API · Сравнить два других плагина
Данные витрины Claude Code: claude-plugins-official. Данные витрины Community GitHub marketplaces. Данные витрины Official MCP Registry. Числа взяты из наших регулярных обходов витрин, последняя проверка . Контакты издателей плагинов мы не публикуем.