Open LLM Leaderboard

Apresentação

Open LLM Leaderboard é um portal de apresentação de avaliação de modelos em linguagem aberta que é adequado para acessar os resultados da avaliação pública e comparar o desempenho do modelo.

Principais recursos

• Apresentação da avaliação: ver os resultados dos testes do modelo
• Triagem do modelo: seleção de modelos candidatos de acordo com as necessidades do projeto

Casos de uso

Desenvolvedores e pesquisadores adequados para comparar modelos e selecionar opções de candidatos poderiam usar resultados abertos como ponto de partida para testes adicionais.

Primeiros passos

As missões de avaliação, dados, versões de modelos e definições de indicadores são conhecidas primeiramente. Selecione para comparar as dimensões associadas com a aplicação real e depois valide-as com sua própria amostra; e registre as configurações de teste para evitar uma única divisão total.

Pontos a verificar

As condições para diferentes listas podem ser diferentes. As pontuações abertas não garantem que o modelo irá executar o mesmo em cada uma das tarefas reais.

Preços e disponibilidade

Os requisitos de conta, preços, limites de exportação de arquivos e disponibilidade regional podem mudar. Confira os termos oficiais atuais antes de usar o serviço. Este diretório não garante uma cota gratuita nem um preço específico.

Referências

Site oficial e informações do produto