Cómo realizar procesos de experimentación de soluciones digitales

¿Cómo medir el éxito de tu piloto digital?

Si te estás planteando lanzar una nueva solución digital al mercado, ya te habrás dado cuenta de que las métricas de éxito de los productos o proyectos tradicionales no tienen sentido para los primeros meses de desarrollo.

Lean StartUp es una de las principales metodologías de innovación, que se usa principalmente para las fases de validación de una solución con el mercado, esto es: para la experimentación. Una de las bases del Lean Startup es la agilidad para crear MVP’s que nos permitan medir resultados y aprender de ellos para iterar o pivotar nuestra solución, de la manera más sencilla, rápida y menos costosa posible.

 

Entonces, te preguntarás: ¿Qué debería medir en este proceso de experimentación?

Consideraciones a tener en cuenta antes de lanzarte a la experimentación de nuevas soluciones digitales

Antes de meternos de lleno en métricas y resultados esperados, es esencial que planteemos un buen experimento. Según nuestra experiencia en SDLI, la mayoría de los equipos ágiles crean un MVP/Piloto sin tener en cuenta el experimento que quieren realizar. Es decir, aún no han planteado una hipótesis a validar, ni saben cómo la van a validar.

Por ello, antes de lanzarte a practicar la experimentación de nuevas soluciones digitales, debes tener en cuenta una serie de consideraciones clave:

  • La experimentación tiene sentido en entornos de alta incertidumbre. En las que hay muchas incógnitas, y no tienes la respuesta clara.
  • La experimentación busca precisamente reducir incertidumbre. O lo que es lo mismo: ganar seguridad en el lanzamiento de una nueva solución.
  • La experimentación necesita recursos monetarios (si bien menos que con la metodología tradicional de desarrollo de productos), así como recursos en forma de tiempo de tu equipo (por mucho que externalices parte del trabajo).
  • La experimentación no tiene por qué ser «corta». Las iteraciones para validar hipótesis sí. Pero puedes necesitar (seguro que lo harás) varias iteraciones para validar tu solución con el mercado, lo cual alargará tu proceso de experimentación.
  • La experimentación significa crear procesos de innovación centrados en el usuario, en los que interactúas con éste. Hasta cierto punto, te expones al usuario. Implica que aceptas que el usuario vea que puedes fallar en tu solución. Que te abres al error de forma más o menos pública.
  • No hay una forma única de experimentar. Hay distintas estratégias y métodos que te darán más o menos fiabilidad en base a la metodología que uses. Dependerá de los recursos y tiempo, esto es, de la importancia, que le des al proyecto.
  • La experimentación es un proceso en el que adoptas el método científico. No se trata de «vender» tu idea a la dirección o al mercado. No se trata de jugar con ideas. Se trata de contrastar las hipótesis clave en las que se sustenta tu proyecto innovador.

 

En SDLI disponemos de nuestra metodología «Lab de experimentación«, basada en Lean Startup, a través de la cual ayudamos a los equipos de innovación a realizar procesos de validación con usuarios reales en entornos reales. Te contamos algunas de las bases de nuestra metodología a continuación. Vamos allá: ¿Cómo planteamos un buen experimento?

 

Paso 1: Planteamiento de la hipótesis inicial

Imaginemos que somos lxs creadorxs de Tinder en 2012. En sus inicios, y simplificando, la única manera de conocer a gente por internet era en chats online (donde muchos de sus usuarios y usuarias eran anónimxs). ¿Es seguro quedar con alguien al que no conoces ni su cara?

Tinder tenía una hipótesis muy importante que validar: “Quedar con alguien que no conoces es sencillo y seguro.”, pero… ¿esto es lo que la gente cree? ¿lxs posibles usuarixs están dispuestxs a quedar con alguien que no conocen mediante una aplicación? e incluso ¿estarían dispuesto a pagar por ello?

Paso 2: Definición del experimento y MVP asociado

Ahora, imaginemos un experimento para validar la anterior hipótesis. El experimento consiste en crear una Landing Page con información general sobre Tinder a la que se redireccionará a las personas interesadas desde campañas pagadas por redes sociales (por ejemplo, Instagram).

Una vez las personas interesadas llegan a la Landing Page, se encontrarán con un Call to action de descarga de la aplicación. Pero cuando hagan click en ese botón, saltará un mensaje que anunciará que actualmente la aplicación no admite más descargas por encontrarse en fase beta, pero sí que se pueden registrar en la lista de espera para la próxima versión. Las personas interesadas, dejarán su correo e información personal.

Es muy importante realizar este tipo de experimentos cuando no hemos validado la propuesta de valor con lxs posibles usuarixs. De esta manera, aún no hemos destinado recursos a desarrollar una aplicación que no sabemos si la gente va a desear.

Nuestro MVP asociado al experimento es una Landing Page con formulario de registro.

Paso 3: Definición de las métricas

Una vez definida la hipótesis y con qué experimento la vamos a validar, es hora de decidir qué vamos a medir.

En el caso de Tinder, el equipo va a tener en cuenta las siguientes métricas:

  • Número de personas interesadas registradas en el formulario web

Paso 4: Definición de criterios de validación

Una vez sabemos qué vamos a medir, debemos de plantearnos qué nivel de éxito se considera aceptable para cada métrica seleccionada. Esto es clave para poder validar o anular la hipótesis planteada.

En el caso de Tinder, después de haber realizado un estudio de mercado mediante la técnica TAM, SAM, SOM, se establece un hipotético mercado objetivo de 120.000 usuarios para los primeros 3 meses. De esta manera, se quiere obtener un 5% del total del mercado objetivo para este experimento.

  • Criterio de validación del número de personas interesadas registradas en el formulario web = 6000 personas registradas en el formulario

Este ejercicio se puede realizar gracias a la ficha de experimentación que puedes descargar clicando aquí . Es recomendable que tu equipo realice esta ficha para las hipótesis más importantes que queréis validar antes de invertir todo vuestro presupuesto en una idea .

Cuando todo el equipo de experimentación haya trabajado en la conceptualización del experimento, es muy importante que os organicéis para definir tareas, responsables y deadlines para poder realizar el experimento.

Ya he realizado el experimento: ¿Ahora qué?

Es esencial obtener aprendizajes de cada experimento. ¿Cómo lo puedes hacer?

En SDLI trabajamos con la Ficha de Aprendizaje, una herramienta muy sencilla que te ayudará a definir los learnings de tu experimentación. Descárgala clicando aquí.

Paso 1: ¿Cuál era tu creencia?

Puedes rescatar tu creencia del paso 1 de la Ficha de Experimento. Aquí recordarás cuál era tu hipótesis.

Paso 2: ¿Qué has observado?

En este paso, deberás describir todas aquellas observaciones relacionadas con el experimento: ¿Cómo se han comportado lxs usuarixs? ¿por qué se han comportado así? ¿tu experimento estaba bien diseñado? ¿tu MVP/piloto era correcto?

Paso 3: ¿Qué has aprendido?

Es el momento de analizar si se ha validado la hipótesis o no. ¿Tu creencia era cierta? ¿Se han cumplido los criterios de validación? ¿Qué insights has podido extraer?

Paso 4: ¿Qué decisiones y acciones vas a tomar a partir de ahora?

En base a tu validación o anulación de la hipótesis, ¿vas a definir un nuevo experimento para validar otra hipótesis? ¿Se debería de cambiar el enfoque de la propuesta de valor? ¿la necesidad de usuarix es relevante? ¿qué plan de acción defines a partir de este experimento?

 

Ya tengo la hipótesis principal validada, así que ahora sí:

¿En qué métricas me debería centrar para los siguientes experimentos con mi piloto?

Una vez tu hipótesis principal está validada, puedes utilizar varias métricas para los siguientes experimentos dependiendo del nivel de maduración de tu piloto.

Es importante señalar que estas métricas son solo una muestra de las muchas disponibles para medir el rendimiento de una solución digital. Es importante que escojas las métricas que sean relevantes para los objetivos específicos del piloto, según las hipótesis que te plantees validar, para poder monitorearlas regularmente después de cada experimento. De hecho, algunas de las métricas aquí usadas en este ejemplo pueden muy probablemente no ser válidas para tus experimentos.

¿Quieres experimentar para validar una nueva solución digital?

¡SDLI te quiere acompañar en este maravilloso viaje! Ponte en contacto con nosotrxs y estaremos encantadxs de ver cómo afrontar tu proyecto.

Jaume Ávalos

Jaume Ávalos

Doble graduado en Administración y Dirección de Empresas y Gestión de la Innovación y Turismo y Gestión del Ocio por la Universidad Pompeu Fabra. Cuenta con más 4 años de experiencia gestionando proyectos en el ámbito universitario, emprendedor y del ocio. Antes de trabajar en SDLI, trabajó en el sector público-privado y de servicios, siendo técnico de emprendimiento universitario, donde lideró proyectos de jóvenes emprendedores basados en la innovación y asesoró a emprendedores locales utilizando un marco de trabajo ágil y centrado en el usuario. También ha liderado proyectos para el sector del ocio en Maximum Escape, una de las mayores cadenas de escape rooms a nivel nacional. Actualmente, trabaja como Senior Project Leader, Scrum Master y Agile Coach en SDLI.

    Deja tu comentario

    Su dirección de correo electrónico no será publicada.*

    Gestión de Cookies
    Sociedad de la Innovación

    Este sitio web utiliza cookies y/o tecnologías similares que almacenan y recuperan información cuando navegas. En general, estas tecnologías pueden servir para finalidades muy diversas, como, por ejemplo, reconocerte como usuario, obtener información sobre tus hábitos de navegación, o personalizar la forma en que se muestra el contenido. Los usos concretos que hacemos de estas tecnologías se describen a continuación.

    Cookies técnicas

    Permiten al usuario la navegación a través de una página web, plataforma o aplicación y la utilización de las diferentes opciones o servicios que en ella existan, incluyendo aquellas que el editor utiliza para permitir la gestión y operativa de la página web y habilitar sus funciones y servicios.También pertenecen a esta categoría, por su naturaleza técnica, aquellas cookies que permiten la gestión, de la forma más eficaz posible, de los espacios publicitarios que, como un elemento más de diseño o “maquetación” del servicio ofrecido al usuario, el editor haya incluido en una página web, aplicación o plataforma en base a criterios como el contenido editado, sin que se recopile información de los usuarios con fines distintos.

    Nombre Dominio Finalidad Propia / de Terceros
    SESSID .sociedaddelainnovacion.es Esta cookie es memorizada y únicamente tiene validez el tiempo que dure la sesión activa en el sitio web. No graba de forma permanente ninguna información en el disco duro de su computadora. También se utiliza para garantizar que los usuarios que escriban comentarios en el blog sean humanos y no aplicaciones automatizadas. De esta forma se combate el spam. Función: Esta cookie es usada por el lenguaje PHP para permitir que las variables de sesión sean guardadas en el servidor web. Esta cookies es esencial para el envío de los formularios de esta web. Expiración: Al finalizar la sesión del usuario. Propia
    moove_gdpr_popup .sociedaddelainnovacion.es Utilizada para guardar las preferencias sobre cookies. Expiración: 2 años. Propia
    __smVID .sociedaddelainnovacion.es Esta cookie almacena información del usuario y sus sesiones para mejorar la experiencia de usuario. Expiración: Al finalizar la sesión del usuario. Sumo
    __smToken .sociedaddelainnovacion.es Cookie para el uso de SumoMe, una herramienta que facilita la difusión de comunicaciones comerciales, y permite al usuario compartir con facilidad contenidos (artículos e imágenes) del Sitio Web. Expiración: 1 año Sumo
    Cookies de análisis o medición

    Permiten al responsable de las mismas el seguimiento y análisis del comportamiento de los usuarios de los sitios web a los que están vinculadas, incluida la cuantificación de los impactos de los anuncios. La información recogida mediante este tipo de cookies se utiliza en la medición de la actividad de los sitios web, aplicación o plataforma, con el fin de introducir mejoras en función del análisis de los datos de uso que hacen los usuarios del servicio.

    Nombre Dominio Tipo / Finalidad Propia / de Terceros
    _ga .sociedaddelainnovacion.es Análitica. Cookies de Google Analytics. Generan un ID de usuario anónimo, que es el que se utiliza para distinguir a los usuarios. Expiración: 2 años. Google Analytics
    _gid .sociedaddelainnovacion.es Análitica. Cookies de Google Analytics. Generan un ID de usuario anónimo, que es el que se utiliza para distinguir a los usuarios. Expiración: 24 horas. Google Analytics
    _gat_<property-id> .sociedaddelainnovacion.es Análitica. Cookies de Google Analytics. Se utiliza para limitar el porcentaje de solicitudes. Expiración: 1 minuto. Google Analytics
    AMP_TOKEN .sociedaddelainnovacion.es Análitica. Cookies de Google Analytics. Incluye un token que se puede utilizar para recuperar un ID de cliente del servicio de ID de cliente de AMP. Otros posibles valores indican inhabilitaciones, solicitudes en curso o errores obtenidos al recuperar un ID del servicio de ID de cliente de AMP. Expiración: 30 segundos y 1 año. Google Analytics
    _gac_<property-id> .sociedaddelainnovacion.es Análitica. Cookies de Google Analytics. Incluye información de la campaña relativa al usuario. Expiración: 90 días. Google Analytics
    SIDCC .google.com Análitica. Provee servicios y extrae información anónima sobre la navegación. Expiración: 3 meses. Google Analytics
    NID .google.com Publicidad. Estas cookies se utilizan para entregar anuncios más relevantes para usted y sus intereses. Expiración: 1 año. Google
    __Secure-3PSIDCC .google.com Publicidad. Estas cookies se utilizan para entregar anuncios más relevantes para usted y sus intereses. Expiración: 2 AÑOS Google
    __Secure-3PAPISID .google.com Publicidad. Estas cookies se utilizan para entregar anuncios más relevantes para usted y sus intereses. Expiración: 2 AÑOS Google
    __Secure-3PSID .google.com Publicidad. Estas cookies se utilizan para entregar anuncios más relevantes para usted y sus intereses. Expiración: 2 AÑOS Google
    SAPISID .google.com Publicidad. Mide el rendimiento de los anuncios y proporciona recomendaciones. Expiración: Persistente. Google
    APISID .google.com Publicidad. Mide el rendimiento de los anuncios y proporciona recomendaciones. Expiración: Persistente. Google
    HSID .google.com Publicidad. Mide el rendimiento de los anuncios y proporciona recomendaciones. Expiración: Persistente. Google
    SSID .google.com Publicidad. Mide el rendimiento de los anuncios y proporciona recomendaciones. Expiración: Persistente. Google
    SID .google.com Publicidad. Mide el rendimiento de los anuncios y proporciona recomendaciones. Expiración: Persistente. Google
    SEARCH_SAMESITE .google.com Publicidad. Proporcionar garantías sobre cuándo se envían cookies entre sitios para que los usuarios estén protegidos. Expiración: 6 meses Google

     

    NOTA: Esta lista se actualizará con la mayor celeridad posible a medida que cambien los servicios del sitio web ofrecidos en el mismo. Sin embargo, ocasionalmente durante esta actualización puede que la lista no incluya ya alguna cookie, aunque siempre se referirá a cookies con propósitos idénticos a los registrados en esta lista.

    Google utiliza diferentes tipos de cookies para el funcionamiento de los productos relacionados con anuncios y los sitios web de Google (ej. Adwords, youtube.com, doubleclick.net, ...).

    Google Analytics es un servicio prestado por google con la finalidad de registrar estadísticas de uso de nuestra web. Para ampliar el uso de las cookies del servicio visite la página de información de desarrolladores.

    Para rehusar el uso o borrar estas cookies puedes consultar en la página de Privacidad de Google.

     

    ¿Cómo puedes configurar o deshabilitar tus cookies?

    Puedes permitir, bloquear o eliminar las cookies instaladas en tu equipo mediante la configuración de las opciones de tu navegador de Internet. En caso de que no permitas la instalación de cookies en tu navegador es posible que no puedas acceder a algunos de los servicios y que tu experiencia en nuestra web pueda resultar menos satisfactoria. En los siguientes enlaces tienes a tu disposición toda la información para configurar o deshabilitar tus cookies en cada navegador:

     

    El Usuario puede permitir, bloquear o eliminar las cookies por medio del panel de configuración anterior. Además, debe tener en cuenta que, si acepta las cookies de terceros, puede eliminarlas desde las opciones de su navegador o desde el sistema ofrecido por el propio tercero.

    El hecho de bloquear la instalación de las cookies no impide la efectiva utilización del Sitio Web por parte del Usuario.

    Puede informarse de las transferencias a terceros países que, en su caso, realizan los terceros identificados en el panel de configuración en sus correspondientes políticas (ver enlaces facilitados).

     

    Versión 27/05/2021