Avaliação local de modelos
Prepare avaliações reproduzíveis com ferramentas da comunidade
Orienta avaliações locais com bibliotecas como inspect-ai e lighteval. Ajuda a definir conjunto de tarefas, configuração e registro dos resultados obtidos.
O que fazer com Avaliação local de modelos
Prepare avaliações reproduzíveis com ferramentas da comunidade
Antes de começar
- Ambiente e dependências indicados no SKILL.md; acesso ao modelo ou dataset escolhido.
- Ambiente de avaliação local com inspect-ai ou lighteval e acesso ao modelo.
Como começar
Abra a página de Avaliação local de modelos e siga as instruções de configuração para o seu ambiente. Confirme as permissões e a compatibilidade com seu agente antes de instalar.
Ler a documentaçãoO que considerar
- Licenças dos modelos e dos dados são separadas da licença da skill; confira os termos de cada recurso.
- A avaliação depende das tarefas e configurações escolhidas; não é um ranking universal.
Fonte conferida em 29 de out. de 2026. A conferência da documentação não equivale a um teste completo da ferramenta pela Agentspedia.