Glossário de IA

Arena ELO é o sistema de classificação do Chatbot Arena que usa o rating ELO (originario do xadrez) para ranquear modelos de linguagem com base em preferências humanas. Usuarios comparam respostas anonimas é os votos geram rankings continuamente atualizados.

Chatbot Arena é uma plataforma da LMSYS que permite comparar modelos de linguagem em batalhas anonimas lado a lado. Usuarios avaliam respostas sem saber quais modelos estao competindo, gerando o ranking mais confiavel de LLMs da indústria.

Leaderboard em IA é um ranking público que compara performance de modelos em benchmarks padronizados. Plataformas como Hugging Face Open LLM Leaderboard é Papers With Code hospedam rankings que orientam a comunidade sobre o estado da arte.

Reranking é a etapa de reordenacao de resultados de busca usando um modelo especializado que avalia a relevância de cada resultado em relação a consulta original, melhorando a precisão final.