Avaliação no Desafio de Identificação de Personagens

  • Roberto Willrich Universidade Federal de Santa Catarina (UFSC)
  • Diana Santos Linguateca & ILOS, Universidade de Oslo
Palavras-chave: estudos literários computacionais, identificação de personagens, avaliação conjunta, métricas de avaliação

Resumo

A primeira edição do Desafio de Identificação de Personagens (DIP) foi uma avaliação conjunta de soluções computacionais para a identificação de personagens em textos literários, bem como a extração de características destas personagens e seus relacionamentos. Para esta avaliação, foi necessária a definição de uma metodologia de avaliação, incluindo a seleção de métricas adequadas ao problema da identificação de personagens em textos literários. Este artigo apresenta uma panorâmica de avaliação na área de identificação de personagens em textos literários, assim como as escolhas concretas que foram realizadas pela comissão organizadora do DIP. Estas escolhas resultaram na definição da metodologia de avaliação do DIP. O uso da metodologia de avaliação proposta é ilustrado pela avaliação da solução candidata submetida ao DIP. Ao final, são apresentadas críticas e sugestões de melhorias à metodologia de avaliação proposta.

Publicado
2023-07-04
Como Citar
Willrich, R., & Santos, D. (2023). Avaliação no Desafio de Identificação de Personagens. Linguamática, 15(1), 69-87. https://doi.org/10.21814/lm.15.1.398
Edição
Secção
DIP - Desafio de Identificação de Personagens