Unstable and experimental repository. Activities to pass the LLM course at CEIA FIUBA
Análisis de un esquema RAG LLM para la futura construcción de un chatbot que responda preguntas sobre diversidad y violencia de género basándose en bibliografía en archivos PDFs. Se analiza el desempeño de tres modelos de la familia llama: tinyllama, llama2 y llama3-chatqa. Se utiliza un conjunto de 10 preguntas y respuestas para evaluar los modelos y las métricas: precisión y recuperación del contexto, fiabilidad y relevancia de la respuesta.