Mejorando la precisión de la clasificación de correos electrónicos de IA a través de la ingeniería de indicaciones: en Q2BSTUDIO, empresa de desarrollo de software, aplicaciones a medida, especialistas en inteligencia artificial, ciberseguridad y servicios cloud AWS y Azure, abordamos un problema recurrente de clasificación errónea entre correos de proyectos y correos de talento. Este artículo describe el problema, la metodología aplicada y los resultados obtenidos, mostrando cómo mejoras en prompt engineering y aprendizaje con pocos ejemplos aumentaron la precisión de nuestro sistema.
Contexto y problema detectado: nuestro sistema clasificaba como PROJECT correos que contenían la expresión proyecto deseado cuando en realidad eran presentaciones de personal. Ejemplos reales: correos con ficha personal que incluían edad, habilidades y la mención proyecto deseado terminaban etiquetados como PROJECT por coincidencia de palabras clave. Esta trampa por palabra clave hacía que correos de TALENT se perdieran, afectando procesos de reclutamiento y respuesta.
Diagnóstico: las causas principales fueron juicio basado únicamente en palabras clave, falta de contexto sobre quién ofrece qué y ejemplos de entrenamiento insuficientes frente a casos ambiguos. Para corregirlo diseñamos una estrategia en capas que combina criterios jerárquicos, ejemplos pocos disparos y reglas de negocio.
Enfoque aplicado: 1) Definir criterio principal: quién está proporcionando qué. Si el remitente es un cliente que ofrece condiciones de trabajo se marca como PROJECT. Si el remitente presenta a una persona y contiene datos personales se marca como TALENT, incluso si incluye la frase proyecto deseado relativa a la preferencia del candidato. 2) Añadir ejemplos Few-shot representando casos típicos y casos ambiguos reales para que el modelo aprenda patrones difíciles. 3) Detectar patrones de información personal como edad, género o estación cercana para forzar clasificación TALENT. 4) Implementar reglas de negocio y verificación por dominio remitente como capa de seguridad.
Ejemplos de entrenamiento: incluimos plantillas reales donde la explicación del razonamiento acompaña cada ejemplo, por ejemplo un ejemplo donde aparece texto personal con edad y skills y razonamiento que concluye TALENT, y un ejemplo donde un cliente publica condiciones de proyecto y se concluye PROJECT. Estas muestras tienen un impacto grande en modelos basados en pocos ejemplos.
Resultados medidos: tras aplicar las mejoras probamos 100 correos previamente mal clasificados. Precisión antes 72% y después 98% con reducción de errores en TALENT de 18 a 1 y en PROJECT de 10 a 1. En validación a gran escala con 1000 correos la precisión general pasó de 72% a 97.6%. Estos resultados demostraron la efectividad de combinar prompt engineering, few-shot learning y reglas adicionales.
Decisiones técnicas y selección de modelo: evaluamos varios modelos y escogimos una opción equilibrada entre precisión, latencia y coste para producción. Además optimizamos costes mediante cacheado de clasificaciones repetidas, procesamiento por lotes y filtros de preprocesamiento para patrones obvios, reduciendo el coste estimado mensual hasta niveles competitivos para el volumen de correos procesados por empresas.
Mecanismos operativos: versionado semántico de prompts para trazabilidad, pruebas A/B entre versiones de indicaciones y monitorización continua de métricas de precisión, confianza baja y cola de revisiones manuales. Implementamos estrategias de fallback para casos de baja confianza incluyendo segunda opinión con otro modelo y reglas de dominio que pueden sobrescribir la decisión automática cuando aplican.
Buenas prácticas extraídas: priorizar la pregunta quién ofrece qué al diseñar la indicación, incluir ejemplos ambiguos entre los pocos ejemplos, vigilar la longitud del prompt para controlar costes y añadir patrones de información personal como señal fuerte de TALENT. Evitar la trampa de palabra clave y favorecer juicios jerárquicos y contextuales es esencial.
Aplicaciones en empresas: los resultados obtenidos son relevantes para equipos que gestionan grandes volúmenes de correos en procesos de reclutamiento, venta técnica o gestión de proyectos. En Q2BSTUDIO aplicamos estas técnicas en soluciones de inteligencia artificial a medida y podemos integrar estas capacidades junto a desarrollo de software a medida y aplicaciones a medida y servicios de inteligencia artificial para empresas para automatizar clasificación, enrutar leads y optimizar procesos internos.
Servicios complementarios: además de clasificación de correos, ofrecemos integración con servicios cloud AWS y Azure, soluciones de inteligencia de negocio y Power BI para reporting y análisis, y servicios de ciberseguridad y pentesting para proteger la información sensible que fluye por correo. Nuestro enfoque combina experiencia en IA, desarrollo de software personalizado y seguridad operativa.
Recomendación práctica: si su organización enfrenta problemas de clasificación automática empiece por recopilar casos reales de misclasificación y úselos como pocos ejemplos. Defina criterios claros y medibles, añada reglas de negocio y monitorice continuamente para adaptar el prompt y los ejemplos. En Q2BSTUDIO podemos asesorar en la implementación, integración y escalado de estas soluciones para que consiga mejoras rápidas en precisión y ahorro operativo.
Conclusión: mejorar la clasificación de correos mediante ingeniería de indicaciones y few-shot learning es una palanca efectiva para aumentar la calidad de sistemas automatizados. La clave está en definir criterios claros, entrenar con ejemplos representativos y combinar IA con reglas y monitorización. Si desea una solución a medida que incluya inteligencia artificial, ciberseguridad y despliegue en cloud, contacte con nuestro equipo de Q2BSTUDIO para evaluar cómo aplicar estas mejoras en su entorno.
