Por qué los comités seleccionan bien y justifican mal
En una reunión de decisión típica, después de tres presentaciones, los participantes expresan frases como "me impresionaron" o "parecían los más profesionales". A veces, la elección es correcta. El problema es que no hay forma de saberlo —y no hay forma de explicar la decisión un año después, cuando el proyecto se complica.
Un Scorecard no pretende reemplazar el juicio. Su objetivo es asegurar que todos los oferentes fueron evaluados según los mismos criterios, que la evidencia de cada calificación fue documentada, y que lo que el comité consideró importante antes de ver las presentaciones fue lo que también prevaleció después.
Las siete dimensiones de evaluación
1. Comprensión del problema. Si la propuesta aborda sus procesos y volúmenes, o si es genérica. Si el proponente identificó alguna inconsistencia o brecha en el documento de consulta.
2. Calidad de la propuesta arquitectónica. Si incluye un diagrama, si se definieron fuentes de verdad, si se consideraron alternativas y se explicó por qué fueron rechazadas.
3. El equipo de trabajo. Quién lidera, cuánto tiempo dedica, quién ejecuta y la proporción de profesionales sénior en las fases decisorias.
4. Experiencia relevante. No la cantidad de proyectos, sino la similitud: industria, complejidad de la integración, magnitud y regulación.
5. Modelo de trabajo y gobernanza. Ritmo de demostraciones, gestión de decisiones, gestión de riesgos y manejo de cambios.
6. Transferencia de conocimiento e independencia. Si existe un plan explícito que les permita mantener el sistema sin su asistencia.
7. Comercial. Precio normalizado, modelo de contratación, flexibilidad contractual y disposición a cláusulas de protección.
Ponderaciones de ejemplo — y cómo ajustarlas
| Dimensión | Proyecto nuevo en organización sin equipo | Proyecto de rescate | Expansión en organización con equipo robusto |
|---|---|---|---|
| Comprensión del problema | 20% | 25% | 15% |
| Arquitectura | 20% | 20% | 25% |
| Equipo de trabajo | 15% | 20% | 15% |
| Experiencia relevante | 10% | 10% | 10% |
| Modelo de trabajo y gobernanza | 10% | 10% | 10% |
| Transferencia de conocimiento | 10% | 5% | 5% |
| Comercial | 15% | 10% | 20% |
La tabla ilustra un principio: las ponderaciones no son fijas, sino que derivan del riesgo dominante. En una organización sin equipo interno, la transferencia de conocimiento es más valiosa. En el rescate de un proyecto, la comprensión de la situación y la identidad del equipo son más importantes.
Defina las ponderaciones antes de recibir las propuestas y publíquelas en el documento de consulta, tal como se especifica en la Guía de RFP.
Escala de calificación con evidencia requerida
El problema con una escala de 1 a 5 es que todos califican con 4. La solución es asignar evidencia a cada nivel:
| Calificación | Significado | Evidencia requerida |
|---|---|---|
| 1 | No cumplido | El tema no aparece en la propuesta |
| 2 | Genérico | Texto de plantilla sin referencia a la organización |
| 3 | Suficiente | Referencia correcta, pero sin profundidad o alternativas |
| 4 | Bueno | Referencia específica con justificación y ejemplo |
| 5 | Excelente | Alternativas consideradas, riesgo identificado, y recomendación en contra de algo solicitado |
La evidencia para una calificación de 5 es lo que hace que el modelo sea útil: un proveedor que dice "esta parte no deberían construirla ahora" demuestra una comprensión que no se puede falsear.
Condiciones de descalificación — antes de calificar
Hay aspectos que no tiene sentido ponderar, porque son motivos de descalificación:
- Negativa a ceder la propiedad de los entregables y la documentación a la organización.
- Negativa a nombrar a los miembros del equipo y sus porcentajes de asignación.
- Incumplimiento de requisitos regulatorios o de seguridad de la información obligatorios.
- Propuesta que no se ajusta a la estructura de precios definida, después de haber tenido la oportunidad de corregirla.
- Falta de disposición a incluir una cláusula de salida básica.
Defínalos de antemano. Una descalificación que se decide a posteriori siempre parece estar dirigida contra un proponente específico.
Proceso de calificación que reduce el sesgo
- Cada miembro del comité califica individualmente antes de la discusión conjunta.
- La calificación se acompaña de un breve comentario que cita una fuente en la propuesta.
- La discusión se centra solo en las grandes diferencias entre los calificadores — allí se encuentra la información clave.
- El precio se revela en esta etapa y no antes, si el proceso lo permite.
- La calificación final se documenta junto con la justificación.
El cuarto paso tiene el mayor impacto. Un comité que ha visto los precios antes de calificar la calidad, calificará la calidad en función del precio, casi siempre sin darse cuenta.
Ejemplo de ilustración: empresa de seguridad comercial
El escenario es hipotético y tiene fines ilustrativos. Un comité de selección calificó a cuatro oferentes. La propuesta que obtuvo la calificación más alta en la dimensión "experiencia relevante" recibió la calificación más baja en la dimensión "comprensión del problema", porque el documento que presentó era casi idéntico a un documento que había presentado en otro proyecto, incluyendo un nombre de sector irrelevante.
En la discusión, se argumentó que la experiencia compensaba. El comité regresó a las ponderaciones que había establecido dos meses antes, donde la comprensión del problema tenía el doble de peso que la experiencia. La decisión se mantuvo.
Lo que el modelo previno aquí no fue necesariamente una elección equivocada, sino un cambio en las reglas de juego después de que el resultado ya era conocido.
Qué hacer con el resultado
La calificación no es una decisión. Es un documento que permite una conversación productiva: dónde está la mayor diferencia entre los oferentes, qué falta en la propuesta del líder y qué riesgo queda abierto. Muchas veces, el resultado más útil es una lista de condiciones para el contrato, y no una elección entre proveedores.
El aspecto comercial se normaliza por separado antes de la calificación, tal como se detalla en la Guía para comparar propuestas, y la relación entre la estructura de costos y la calificación comercial se explica en la Guía de costo de implementación de Salesforce.
Integración con la entrevista profesional
La calificación basada en documentos es limitada. Un complemento esencial es una reunión en la que se formulan preguntas abiertas al proveedor y se evalúa su forma de pensar en tiempo real. Un conjunto completo de preguntas se encuentra en la Guía de preguntas antes de elegir un integrador Salesforce, y los criterios generales para evaluar a la empresa en la Guía para elegir una empresa de implementación Salesforce.
El siguiente paso
Ponga por escrito sus ponderaciones antes de leer la primera propuesta, y pida a cada miembro del comité que califique individualmente. Estos dos pasos, que en conjunto toman una hora, mejoran la calidad de la decisión más que cualquier ronda adicional de presentaciones.