Proyecto de investigación: ''Análisis de buenas prácticas en diseño de prompts y su impacto en el rendimiento de modelos LLM''
Investigadores:
Investigador principal (IP): Dr. Gustavo Quintero Barreto (U del Istmo; UTP: CIEDU AIP)
Co-investigadora: Dra. Aura Lopez de Ramos (CIEDU AIP)
Co-investigadora: Dra. Yuly Esteves González (UNICyT; UPEL – Venezuela)
Co-investigadora: Dra. Nelly Melendez (UNICyT; UMA – Venezuela; CIEDU AIP)
Fechas: Mayo – agosto del 2025
Patrocinado por: U del Istmo Panamá (PdT No. PRO-CII-D-03-25) y el Centro de Investigación Educativa AIP
Los modelos de inteligencia artificial generativa, tales como ChatGPT, han transformado la manera en que los usuarios interactúan con la información y generan contenido. Sin embargo, la efectividad de estos modelos depende en gran medida de la calidad de los prompts utilizados. Investigaciones recientes han demostrado que la formulación adecuada de prompts puede mejorar la precisión, coherencia y relevancia de las respuestas generadas.
A pesar de los avances en la ingeniería de prompts, existe una falta de comprensión sistemática y cuantificable sobre cómo las diferentes estrategias de diseño de prompts afectan el rendimiento de los modelos de Lenguaje extenso utilizados en la IA (LLM ́s). Al presente, la mayoría de los estudios se han centrado en análisis cualitativos, dejando una brecha de respaldo en la investigación que cuantifique objetivamente el impacto de las buenas prácticas en el diseño de prompts, incluyendo estrategias para su normalización y dominio público en un entorno ético.
Esta investigación contribuirá al fortalecimiento de líneas de investigación e Innovación para una educación del futuro, alineándose con los objetivos estratégicos y la esencia misma del sello transformador de la Universidad del Istmo en Panamá. Esto será posible en gran medida gracias a un puntual seguimiento de apoyo a la capacitación docente y de estudiantes en estas especialidades, principalmente en las áreas de maestrías y doctorados y así poder incrementar competencias con el uso de estas herramientas propias de las TIC ́s.
Objetivo general
Identificar buenas prácticas en el diseño de prompts para modelos LLM ́s de IA generativa, que optimicen la calidad y eficiencia de los resultados generados por modelos de lenguaje LLMs en contextos educativos
e investigativos.
Objetivos específicos
- Examinar de forma exhaustiva la literatura existente sobre técnicas de formulación de prompts y desarrollar contenido para el repositorio digital disponible para estudiantes y docentes
2. Desarrollar un marco metodológico para la evaluación cuantitativa del rendimiento de los modelos de lenguaje, basado en métricas objetivas de calidad y eficiencia
3. Evaluar al menos 3 técnicas reconocidas existentes, de diseño de prompts y/o sus combinaciones útiles, analizando niveles de impacto en la reducción de sesgos y la mejora de la coherencia y relevancia de las respuestas de texto generadas en al menos tres LLM del top ten de botpress.com (https://botpress.com/es/llm-ranking), o bien del ranking de LLM-Stats.com (https://llm-stats.com/).
Para conocer más escribe a: proyectos@ciedupanama.org o alopez@ciedupanama.org
