ROUGE Score
Categoria
Termos Tecnicos Avancados
ROUGE Score e uma familia de metricas para avaliar sumarizacao automatica comparando o resumo gerado com resumos de referencia. Mede recall de n-grams (ROUGE-N), subsequencias comuns (ROUGE-L) e sobreposicao de skip-bigrams (ROUGE-S).
Categoria
Termos Tecnicos Avancados
Compartilhar
O que e ROUGE Score
ROUGE (Recall-Oriented Understudy for Gisting Evaluation) e uma familia de metricas automaticas para avaliar a qualidade de resumos gerados automaticamente, comparando com resumos de referencia escritos por humanos.
Variantes principais:
- ROUGE-1: sobreposicao de unigrams (palavras individuais)
- ROUGE-2: sobreposicao de bigrams (pares de palavras)
- ROUGE-L: maior subsequencia comum (LCS)
- ROUGE-S: sobreposicao de skip-bigrams
Diferenca do BLEU:
- ROUGE foca em recall (cobertura do conteudo de referencia)
- BLEU foca em precisao (acuracia do texto gerado)
- ROUGE e mais adequado para sumarizacao
- BLEU e mais usado para traducao
A Trilion utiliza ROUGE como metrica padrao na avaliacao de sistemas de sumarizacao e extracao de informacao, complementando com avaliacao humana para projetos criticos.
