Large Language Model Evaluation
الملخص
El objetivo de este proyecto es desarrollar una herramienta para el grupo de investigación EduSTEAM capaz de evaluar modelos de lenguaje grande para, a futuro, integrarlo con el asistente que están desarrollando. Se ha adaptado un prototipo hecho por Marc capaz de extraer conversaciones de modelos y poder tratar con ellas, mejorándolo y añadiendo funcionalidades adicionales. A partir de esta base, se ha implementado un sistema de creación y exportación de datasets, así como la funcionalidad de lanzarlos contra un modelo específico para, seguidamente, poder evaluar los resultados dados. Para todo esto se ha creado una base de datos completamente nueva además de una interfaz gráfica para facilitar la interacción con el usuario
الكلمات المفتاحية
غير متوفر
التخصصات
رسائل وأطاريح مشابهة
- Can Large Language Models become Innovation Experts? : Emulating Expert Evaluation of Innovation in Startups with Large Language Models Ricarda Nettinger · University of Turku · 2026
- Educational question generation and evaluation with large language models Chun Yi Louis Bo · 2024
- Large Language Model Evaluation 優介 坂井 · 2024
- Learning to adapt: From structured domain adaptation to efficient in-context learning for large language models Zihao Xu · Rutgers University · 2026
- On the Safety Alignment of Large Language Models Mengxuan Hu · 2026
- Documenting and Improving Prompts for Large Language Models Amandine M. Caut · Dalarna University Library · 2026
