ROUGE Score

Categoria
Termos Tecnicos Avancados
ROUGE Score é uma familia de métricas para avaliar sumarizacao automática comparando o resumo gerado com resumos de referência. Mede recall de n-grams (ROUGE-N), subsequências comuns (ROUGE-L) é sobreposicao de skip-bigrams (ROUGE-S).
Categoria
Termos Tecnicos Avancados
Compartilhar
LinkedInWhatsApp

O que é ROUGE Score

ROUGE (Recall-Oriented Understudy for Gisting Evaluation) é uma familia de métricas automáticas para avaliar a qualidade de resumos gerados automáticamente, comparando com resumos de referência escritos por humanos.

Variantes principais:

  • ROUGE-1: sobreposicao de unigrams (palavras individuais)
  • ROUGE-2: sobreposicao de bigrams (pares de palavras)
  • ROUGE-L: maior subsequência comum (LCS)
  • ROUGE-S: sobreposicao de skip-bigrams

Diferenca do BLEU:

  • ROUGE foca em recall (cobertura do conteúdo de referência)
  • BLEU foca em precisão (acuracia do texto gerado)
  • ROUGE é mais adequado para sumarizacao
  • BLEU é mais usado para traducao

A Trilion útiliza ROUGE como métrica padrão na avaliação de sistemas de sumarizacao é extracao de informação, complementando com avaliação humana para projetos criticos.

Glossário...

Acreditamos que a alquimia de Retórica, Criatividade e variadas Habilidades humanas criam resultados incríveis.