Banca de QUALIFICAÇÃO: EMELYN CLEMENTINO FREIRE

Uma banca de QUALIFICAÇÃO de MESTRADO foi cadastrada pelo programa.
DISCENTE : EMELYN CLEMENTINO FREIRE
DATA : 20/08/2026
HORA: 09:00
LOCAL: https://meet.google.com/kma-bwen-qyh
TÍTULO:

Indexação Semântica em Sistemas de Recuperação Aumentada por Geração (RAG): Uma Avaliação Experimental em Dissertações Acadêmicas

PALAVRAS-CHAVES:

Recuperação Aumentada por Geração (RAG); Indexação Semântica; Enriquecimento Semântico; Taxonomia Revisada de Bloom; Avaliação Experimental.

PÁGINAS: 50
RESUMO:

Os sistemas de Recuperação Aumentada por Geração (Retrieval-Augmented Generation – RAG) têm se consolidado como uma abordagem eficaz para ampliar a capacidade de Modelos de Linguagem de Grande Escala (Large Language Models – LLMs) em recuperar e utilizar informações provenientes de bases documentais externas. Entretanto, a qualidade das respostas geradas depende diretamente das estratégias de segmentação, indexação e recuperação empregadas, especialmente em documentos acadêmicos extensos e estruturalmente complexos. Esta pesquisa propõe uma avaliação experimental de duas arquiteturas de indexação para sistemas RAG aplicados a um corpus composto por 20 dissertações da Universidade Federal do Rio Grande do Norte (UFRN), comparando uma abordagem monolítica baseada em segmentação textual uniforme com uma abordagem modular enriquecida semanticamente por meio de metadados e informações estruturais. Os experimentos serão conduzidos utilizando diferentes modelos de embeddings e configurações de recuperação, com geração local de respostas. A avaliação será realizada por meio de um conjunto de perguntas organizado segundo os níveis cognitivos da Taxonomia Revisada de Bloom, permitindo uma análise sistemática das capacidades de recuperação e geração dos sistemas. O desempenho será mensurado utilizando as métricas do framework RAGAS, complementadas por um modelo LLM Juiz e por testes estatísticos, incluindo Análise de Variância (ANOVA). Espera-se demonstrar que estratégias de enriquecimento semântico contribuem para melhorar a recuperação de contexto e a qualidade das respostas geradas, além de estabelecer uma metodologia reprodutível para avaliação experimental de sistemas RAG aplicados a acervos acadêmicos.

MEMBROS DA BANCA:
Presidente - 1837240 - MARCELO AUGUSTO COSTA FERNANDES
Externo à Instituição - GABRIEL BEZERRA MOTTA CÂMARA - UFRN
Externo à Instituição - SERGIO NATAN SILVA - UFCG