Friday, March 20, 2009

Sesgo de selección

Pocos dias después de hablar un poco de los peligros de sesgo de selección (selection bias en inglés), he leido una explicación tan buena, que todos que lean el artículo nunca más se olvidarán de lo graves que pueden ser las consecuencias del sesgo de selección.



Explican el fenómeno hablando de los aviones que volvían tras bombardear Alemania a las bases de los aliados durante la segunda guerra mundial. Los técnicos se dieron cuenta, que habían algunas partes de avión que recibían bastante más impactos de balas de la defensea aerea que otras. Tras esta observación, lanzaron un programa para identificar y reforzar todas estas partes que más propensas estaban a daños.

Parece buena iniciativa... Pero sólo a primera vista. Los aviones realmente gravemente dañados se estrenaron mucho antes de poder a las bases. Así, la identificación de partes de aviones más dañadas simplemente servía para marcar las partes de avión poco críticas para el funcionamiento correcto del avión, poco más. Al contrario de la iniciativa original, lo correcto hubiese sido reforzar aquellas partes que menos impactos tenían en en las inspecciones post-misión, para proteger las partes que con unos pocos impactos de balas hacían el avion ingobernable.

Creo que las paralelas con cualquier web son bastante claras. Somos muchos que tomamos como base de optimización de procesos web los datos de navegación de aquellos usuarios que llegaron hasta el final del embudo de conversión. Porque claro, los usuarios que más compran son los que más tienes que cuidar, y optimizar su experiencia. Es lógico, ¿no?  O ... ¿no?

Está claro que no todos los que empiezan un proceso de venta realmente tienen la intención de comprar, pero aún así, creo que hay una moraleja importante de aquella historia (o aquella leyenda urbana, no importa). No caigamos en las trampas que nos prepara el sesgo de selección. ¿Y los que nunca llegaron al final de la misión,  que se quedaron en el teritorio enemigo? Como primer punto, revisa qué proporción de tus esfuerzos de optimización les dedicas a los usuarios con ventas realizadas y a los usuarios con ventas frustradas.

Termino este post militar con otro eslogan del ámbito militar, el de los marines estadounidense, cuya filosofía es emplear todos los esfuerzos disponibles (a veces parecen excesivos) para salvar a los heridos y aquellos que se estrenaron en el teritorio enemigo: "No man left behind." Me parece un buen eslogan para la optimización de procesos web.

2 comments:

  1. Si quieres entender bien el significado del lema de los marines y sus consecuencias tienes que ver "Black Hawk derribado".

    ReplyDelete
  2. Marek, me ha gustado ... cuantas alas habremos reforzado innecesariamente sin darnos cuenta ...
    Un abrazo,

    ReplyDelete

¿Estás de acuerdo? ¿O desacuerdo? ¿Algún comentario para mejorar el artículo?

Sólo se moderan los comentarios en los posts muy antiguos (por problema con comment spam.) El resto se publica inmediatamente.