ROUGE Score
Categoria
Termos Tecnicos Avancados
ROUGE Score é uma familia de métricas para avaliar sumarizacao automática comparando o resumo gerado com resumos de referência. Mede recall de n-grams (ROUGE-N), subsequências comuns (ROUGE-L) é sobreposicao de skip-bigrams (ROUGE-S).
Categoria
Termos Tecnicos Avancados
O que é ROUGE Score
ROUGE (Recall-Oriented Understudy for Gisting Evaluation) é uma familia de métricas automáticas para avaliar a qualidade de resumos gerados automáticamente, comparando com resumos de referência escritos por humanos.
Variantes principais:
- ROUGE-1: sobreposicao de unigrams (palavras individuais)
- ROUGE-2: sobreposicao de bigrams (pares de palavras)
- ROUGE-L: maior subsequência comum (LCS)
- ROUGE-S: sobreposicao de skip-bigrams
Diferenca do BLEU:
- ROUGE foca em recall (cobertura do conteúdo de referência)
- BLEU foca em precisão (acuracia do texto gerado)
- ROUGE é mais adequado para sumarizacao
- BLEU é mais usado para traducao
A Trilion útiliza ROUGE como métrica padrão na avaliação de sistemas de sumarizacao é extracao de informação, complementando com avaliação humana para projetos criticos.
