Logo Passei Direto
Buscar
A avaliação da qualidade de modelos de PLN é um passo crítico para garantir que os resumos e as traduções produzidas sejam úteis e confiáveis. Como a linguagem humana permite diversas formas de expressar a mesma ideia, o uso de métricas automáticas padronizadas tornou-se essencial para comparar o desempenho de diferentes arquiteturas sob condições equivalentes. Duas das métricas mais difundidas na literatura científica e na indústria são o ROUGE e o BLEU. De acordo com os tópicos de avaliação e aplicações práticas do material, quais métricas são recomendadas para avaliar a sumarização automática e a tradução neural, respectivamente? Assinale a alternativa correta: Questão 8Resposta a. O ROUGE avalia a velocidade de processamento dos modelos Transformer, enquanto o METEOR é utilizado para contar o número de caracteres em um texto. b. Sistemas de sumarização não utilizam métricas automáticas, sendo avaliados apenas pela quantidade de bytes do arquivo final. c. A métrica F1-Score é exclusiva para tradução, enquanto o BLEU avalia apenas a acurácia de chatbots em ambientes hospitalares. d. A métrica BLEU é utilizada para identificar sentimentos positivos, enquanto o ROUGE foca no reconhecimento de nomes de cidades e países. e. A métrica ROUGE é utilizada principalmente para avaliar resumos, enquanto a métrica BLEU é o padrão para sistemas de tradução automática.
User badge image
Ana Flávia De Souza

há 2 meses

Respostas

User badge image

Ed Verified user icon

há 2 meses

Vamos analisar as alternativas com base no conhecimento sobre métricas de avaliação em Processamento de Linguagem Natural (PLN): - ROUGE é uma métrica amplamente usada para avaliar a qualidade de resumos automáticos, comparando a sobreposição de n-gramas, sequências e unidades semânticas entre o resumo gerado e o resumo de referência. - BLEU é uma métrica padrão para avaliação de sistemas de tradução automática, medindo a correspondência entre a tradução gerada e uma ou mais traduções de referência. Analisando as alternativas: a) Incorreta. ROUGE não avalia velocidade de processamento, e METEOR não é usado para contar caracteres. b) Incorreta. Sistemas de sumarização utilizam métricas automáticas, como ROUGE. c) Incorreta. F1-Score não é exclusiva para tradução, e BLEU não é usado para avaliar chatbots especificamente. d) Incorreta. BLEU não é usado para identificar sentimentos, e ROUGE não foca em reconhecimento de entidades. e) Correta. ROUGE é usada para avaliar resumos, e BLEU é padrão para tradução automática. Portanto, a alternativa correta é: e) A métrica ROUGE é utilizada principalmente para avaliar resumos, enquanto a métrica BLEU é o padrão para sistemas de tradução automática.

Essa resposta te ajudou?

0
Dislike0

Ainda não achou a resposta?

  • Integrado com os principais modelos de IA do mercado
  • Respostas em segundos
  • IA treinada para estudantes brasileiros.
PasseIA logoEvolua sua forma de estudar

Cadastre-se ou realize login

Ainda com dúvidas?

Envie uma pergunta e tenha sua dúvida de estudo respondida!

Mais conteúdos dessa disciplina