Pondere e Expanda: Impacto e Limitações de Representações Contextual-Esparsas na Modelagem de Tópicos

Le résumé fourni par la source

Este trabalho investiga o uso de estratégias baseadas em representações contextual-esparsas na tarefa de Modelagem de Tópicos (MT), buscando conciliar a interpretabilidade das representações esparsas com a riqueza semântica proporcionada pelo contexto. Para isso, empregamos o modelo SPLADE, que representa documentos de maneira sensível ao contexto por meio de mecanismos de expansão e ponderação de termos. A abordagem é avaliada empiricamente em comparação com outras formas de representação, utilizando uma métrica tradicional e considerando conjuntos de dados distintos. Os resultados evidenciam que a etapa de ponderação favorece uma MT eficaz, enquanto a expansão, apesar de promissora, ainda apresenta restrições decorrentes da incompatibilidade entre o vocabulário da representação e os textos originais.

Ce résumé expose les affirmations des auteurs. BNTIC ne l’interprète pas comme une validation indépendante des résultats.