Un experimento útil empieza mucho antes de hablar con el primer participante. Primero hay que establecer qué se busca aprender, con quién, bajo qué condiciones y qué resultado cambiará la decisión. Strategyzer utiliza la Test Card para mantener visibles hipótesis, prueba, medida y umbral; GOV.UK recomienda preparar objetivos, reclutamiento, materiales y sesiones piloto [R03][R20].
1. Define la decisión y una hipótesis delimitada
Escribe una pregunta que importe ahora: «¿Aceptarán encargados elegibles utilizar una agenda durante catorce días?». Explica qué inversión depende de la respuesta. Relaciona la hipótesis con la guía para redactarla. Decide antes de ejecutar qué información apoyaría, debilitaría o dejaría inconclusa la afirmación.
Si todavía no sabes qué método proporcionará esa evidencia, consulta cómo elegir el experimento adecuado según la decisión, el costo, el tiempo y la fuerza de la señal esperada. Elegir el método precede a detallar su protocolo.
2. Recluta a quienes realmente importan
Define población, criterios de inclusión y exclusión, lugar y método de contacto. Para un servicio de reservas necesitas personas que gestionen reservas, no únicamente propietarios que nunca usan el sistema. Documenta si reclutas por conveniencia, por criterios de experiencia o mediante un procedimiento probabilístico. Las muestras por conveniencia permiten aprender, pero no permiten extrapolar tasas sin cautela [R07][R08].
No existe una cifra mágica de participantes. Entrevistas cualitativas, usabilidad, encuestas y A/B tienen objetivos distintos; si buscas inferencia estadística necesitarás un diseño y una precisión definidos. La guía GOV.UK orienta sobre métodos y muestras, no establece un número universal para todas las decisiones [R07].
3. Diseña tareas, materiales y condiciones
Detalla la oferta, los pasos que verá cada persona, el dispositivo, las instrucciones, quién facilita la sesión y qué puede variar. Para una prueba comparativa, procura que las condiciones sean equivalentes; considera aleatorizar grupos u orden cuando sea apropiado. El NIST trata factores, aleatorización y confusión en diseños experimentales formales; no implica que una entrevista exploratoria deba convertirse en un ensayo de laboratorio [R11].
Antes de fijar las condiciones, revisa cómo reconocer y reducir sesgos en un experimento: selección de participantes, instrucciones dirigidas y variables que cambian a la vez pueden falsear una comparación. El control debe ser proporcional a la pregunta y al método.
Si utilizas un prototipo, verifica que permite completar las tareas relevantes y distingue claramente qué es simulado y qué funciona realmente.
4. Define métricas, denominadores y criterios previos
No basta con «mediremos interés». Debes especificar evento: solicitud enviada, sesión completada, reserva registrada, error crítico, pago realizado o cancelación. Registra denominadores: de 20 personas contactadas, cuántas eran elegibles, cuántas recibieron la oferta, cuántas aceptaron y cuántas terminaron. Documenta el período, cómo se medirá y qué decisión se tomaría bajo cada resultado.
| Elemento del piloto hipotético | Definición prevista |
|---|---|
| Hipótesis | Cinco de diez restaurantes elegibles aceptarán un piloto |
| Población | Encargados que administran reservas telefónicas |
| Procedimiento | Demostración estándar y oferta idéntica de catorce días |
| Métrica principal | Aceptaciones / ofertas presentadas a elegibles |
| Métricas secundarias | Uso semanal, errores, tiempo de registro y soporte |
| Umbral | 5/10, solo ejemplo que requiere justificación comercial |
| Resultado inconcluso | Reclutamiento insuficiente o condiciones modificadas |
El umbral es hipotético; una aceptación de 5/10 no significa que la mitad de todos los restaurantes comprará. Además, aceptar un piloto gratuito no prueba pago futuro.
5. Prepara presupuesto, duración y responsables
Incluye días para reclutar, confirmar consentimiento, montar el artefacto, entrenar al equipo, ejecutar, analizar y documentar. Especifica un responsable de decisiones y otro de registros cuando sea posible. Establece criterios de interrupción ante fallos técnicos graves, riesgos para participantes o promesas comerciales incumplibles.
El presupuesto, la duración y los responsables del protocolo deben trasladarse a un cronograma realista con dependencias, disponibilidad y holguras. Un ensayo que requiere equipo, permisos o participantes indisponibles no está listo solo porque el protocolo tenga fecha de inicio.
6. Ensaya antes de ejecutar
Haz una sesión de prueba del protocolo; comprueba tiempos, instrucciones, registro y funcionamiento del artefacto. Un ensayo puede revelar que una pregunta induce la respuesta o que una tarea no permite observar la hipótesis [R20][R18]. Si cambias el protocolo después de empezar la investigación cuantitativa, versiona el cambio y evita sumar resultados incompatibles como si fueran equivalentes.
7. Consentimiento y límites éticos
Explica quién investiga, propósito, voluntariedad, grabaciones, uso y conservación de información. No presentes una preventa como un producto disponible si no puedes atenderla; explica condiciones y devoluciones pertinentes. Las obligaciones legales concretas varían por jurisdicción; las guías GOV.UK proporcionan buenas prácticas de investigación, no asesoría legal universal [R10][R16].
Si la prueba involucra datos personales, cobros, preventas o una actividad regulada, utiliza el método para identificar requisitos legales y operativos aplicables antes de lanzarla. No deduzcas obligaciones específicas de una guía redactada para otro país.
Plantilla de protocolo
ID · versión · decisión bloqueada · hipótesis · tipo de riesgo · criterios de reclutamiento · método · tareas · materiales · métricas/denominadores · umbrales · duración · consentimiento · responsables · incidencias · condiciones de interrupción · limitaciones esperadas. Compara el registro terminado con la documentación objetiva de resultados para cerrar el ciclo.
Qué deberías tener al terminar: un protocolo que otra persona pueda comprender y ejecutar sin reinterpretar sus objetivos. Fuentes principales: [R03], [R07], [R08], [R10], [R11], [R18], [R20].
Bibliografía y referencias
- [R03] Strategyzer. Validate Your Ideas with The Test Card. https://www.strategyzer.com/library/validate-your-ideas-with-the-test-card — Hipótesis, prueba, métrica y umbral.
- [R20] GOV.UK Service Manual. Plan a round of user research. https://www.gov.uk/service-manual/user-research/plan-round-of-user-research — Prácticas piloto y planificación de sesiones.
- [R07] GOV.UK Service Manual. Plan user research for your service. https://www.gov.uk/service-manual/user-research/plan-user-research-for-your-service — Preguntas, métodos y selección de participantes.
- [R08] GOV.UK Service Manual. Finding participants for user research. https://www.gov.uk/service-manual/user-research/find-user-research-participants — Reclutamiento, pertinencia y sesgos de selección.
- [R11] NIST/SEMATECH e-Handbook. Choosing an experimental design. https://itl.nist.gov/div898/handbook/pri/section3/pri3.htm — Variables, aleatorización, factores de confusión y diseños comparativos.
- [R18] Strategyzer. Designing Strong Experiments. https://www.strategyzer.com/library/designing-strong-experiments — Precisión de hipótesis, artefactos, participantes.
- [R10] GOV.UK Service Manual. Getting informed consent for user research. https://www.gov.uk/service-manual/user-research/getting-users-consent-for-research — Consentimiento y transparencia en investigación.
- [R16] GOV.UK Service Manual. Managing user research data and participant privacy. https://www.gov.uk/service-manual/user-research/managing-user-research-data-participant-privacy — Protección y retención de datos.