Pruebas de retención geográfica

Qué es una prueba geográfica

Las pruebas de retención geográfica miden el impacto incremental tratando regiones geográficas enteras como unidad de experimentación, en lugar de usuarios individuales. Se elige un conjunto de regiones, ciudades, estados o mercados de medios, y se dividen en un grupo de tratamiento donde los anuncios siguen activos y un grupo de retención donde se pausan durante el periodo de prueba. Después se compara el volumen de conversiones, las ventas u otra métrica de negocio entre ambos grupos.

Este enfoque no depende de píxeles, cookies ni del emparejamiento interno de usuarios de una plataforma. Mide resultados a nivel agregado, usando los datos de ventas o conversión que ya se registran por región, lo que lo hace útil cuando el seguimiento no es fiable o cuando se quiere validar una métrica que existe fuera de cualquier plataforma publicitaria, como los ingresos en tienda física.

Cómo funciona

El requisito central es encontrar regiones comparables antes de que empiece la prueba. Los analistas suelen mirar patrones históricos de ventas y elegir regiones de tratamiento y de retención con tendencias, tamaño y estacionalidad similares, de modo que cualquier diferencia observada durante la prueba se pueda atribuir a la exposición publicitaria y no a diferencias preexistentes entre mercados.

Durante la prueba, el gasto continúa con normalidad en las regiones de tratamiento y se pausa o se reduce de forma significativa en las regiones de retención. Tras el periodo de prueba, normalmente un mínimo de varias semanas para suavizar el ruido diario, se compara el cambio en la métrica objetivo entre ambos grupos. La diferencia, ajustada por cualquier brecha previa a la prueba entre las regiones, es el lift estimado.

Por qué importa

Las pruebas geográficas funcionan incluso cuando el seguimiento por cookie o píxel está degradado, ya que no requieren identificar usuarios individuales entre dispositivos. Es uno de los pocos métodos de incrementalidad capaces de validar resultados offline como el tráfico a tienda física o los ingresos en punto de venta, algo que las pruebas a nivel de plataforma no pueden ver. También evita la «contaminación», un problema en el que las pruebas aleatorizadas a nivel individual se filtran porque personas del grupo de control siguen viendo un anuncio pensado para otra persona del mismo hogar o dispositivo compartido.

La contrapartida es que las pruebas geográficas son más gruesas. Necesitan regiones más grandes y duraciones más largas para lograr una lectura fiable, y son más sensibles a diferencias regionales ajenas a la publicidad, como un fenómeno meteorológico local o una promoción de un competidor en un mercado concreto.

Cómo actuar

Usa pruebas geográficas para validar la incrementalidad de canales o campañas donde importe la conversión offline, o donde desconfíes de las cifras basadas en píxel por la pérdida de seguimiento. Elige los pares de regiones con cuidado usando datos históricos en lugar de intuición, y mantén el periodo de prueba lo bastante largo para promediar el ruido diario. Cuando la prueba geográfica confirma un lift sólido, respalda escalar el gasto con más confianza de la que da por sí sola la atribución.

En la práctica, los equipos suelen combinar las pruebas geográficas con estudios de lift de conversión a nivel de plataforma. Cuando ambos coinciden, la confianza en la estimación de incrementalidad es alta. Cuando divergen, suele señalar un vacío de medición que merece la pena investigar.

Errores comunes

Elegir regiones que nunca fueron comparables entre sí socava toda la prueba, ya que cualquier diferencia observada podría reflejar simplemente brechas preexistentes. Ejecutar la prueba durante un periodo demasiado corto, sobre todo coincidiendo con una festividad o un evento de ventas inusual, introduce ruido que ahoga la señal real. Ignorar el efecto de desbordamiento transfronterizo, donde residentes de una región de retención quedan expuestos a anuncios pensados para una región de tratamiento vecina, también debilita los resultados. Tratar el resultado de una prueba geográfica como una verdad fija en lugar de una comprobación periódica pasa por alto cómo cambian las condiciones de mercado y competencia.

Cómo ayuda YieldBI

YieldBI no ejecuta pruebas de retención geográfica por sí misma, pero mantiene la atribución a nivel de plataforma y el ROAS combinado en un solo lugar, de modo que los resultados regionales de una prueba geográfica son fáciles de comparar contra el rendimiento reportado y detectar dónde divergen ambos.