Lista de evaluación · IA y procesos · Grupo Salus
Cómo evaluar un asistente de IA para consultas internas
Criterios para definir fuentes, permisos, preguntas de prueba y revisión humana antes de usar un asistente con tu equipo.
Publicado el
Un asistente de IA para consultas internas puede ayudar a encontrar información aprobada y responder preguntas repetidas. Su utilidad depende de las fuentes que puede consultar, los permisos de cada persona y una salida clara cuando no sabe responder. La primera prueba debe ser pequeña y centrarse en preguntas reales del equipo.
Define la tarea antes de elegir la herramienta
Escribe diez preguntas frecuentes que hoy llegan a una persona o se buscan en varios documentos. Señala la respuesta correcta y el documento vigente que la respalda. Si no existe una fuente confiable, primero hay que ordenar esa información.
La plantilla para priorizar procesos de IA ayuda a decidir si esta tarea merece ser la primera prueba.
Lista de evaluación
| Tema | Pregunta que debes responder |
|---|---|
| Alcance | ¿Qué preguntas puede atender y cuáles debe derivar? |
| Fuentes | ¿Qué documentos están aprobados y quién los mantiene? |
| Permisos | ¿Puede cada usuario acceder solo a la información que le corresponde? |
| Respuesta | ¿Muestra la fuente utilizada y reconoce la incertidumbre? |
| Actualización | ¿Cómo se retira una versión antigua de un documento? |
| Privacidad | ¿Qué datos entran en la conversación y quién puede revisarlos? |
| Supervisión | ¿Quién analiza errores y decide cambios? |
No basta con que el asistente responda de forma fluida. Una respuesta convincente que cita un documento caducado puede causar más trabajo que una derivación honesta a la persona responsable.
Diseña la primera prueba
Divide tus preguntas en tres grupos: respuestas que están claramente en las fuentes, preguntas ambiguas y preguntas fuera del alcance. Comprueba si el asistente encuentra la información correcta, cita la fuente apropiada y se detiene o deriva cuando falta contexto. Registra los fallos para ajustar documentos, permisos o instrucciones antes de ampliar el uso.
Ficha para decidir el siguiente paso
- Equipo que utilizaría el asistente:
- Preguntas y documentos de la prueba:
- Responsable de actualizar cada fuente:
- Información que debe quedar fuera:
- Persona que recibirá las consultas derivadas:
- Criterio para ampliar o detener la prueba:
Grupo Salus ofrece chatbots y asistentes con IA para casos con fuentes y límites definidos. Puedes solicitar un diagnóstico inicial si quieres revisar un conjunto de preguntas y documentos antes de construir el asistente.