Sobre los testeos A/B en Forge

Loord

Community Manager
logo.png

Estimados fans de Forge,

En los últimos tiempos, hemos recibido comentarios sobre las pruebas A/B y la forma en que las realizamos. En particular, comentarios sobre las pruebas A/B para Forge Plus y la actualización de los Desafíos Diarios. Por lo tanto, pensamos que sería útil para vosotros tener más información sobre nuestro enfoque de las pruebas A/B y por qué son parte integral del desarrollo de Forge of Empires.

Empecemos con una definición de un test A/B. Una prueba A/B es una prueba estándar de la industria que suelen utilizar los desarrolladores para controlar la reacción de los jugadores a una característica. En estas pruebas, se seleccionan dos o más grupos al azar. Están formados por un grupo de prueba (grupo "A"), que tendrá acceso a una función, y un grupo de control (grupo "B"), que no. Mediante esta comparación, los desarrolladores pueden controlar directamente el cambio en el comportamiento de los jugadores y evaluar el impacto de la función probada. Lo hacemos a través de comentarios cuantitativos y cualitativos. Y debemos tener en cuenta ambos, pero por favor, intenta tener en cuenta que los comentarios del foro son sólo una parte de las muchas áreas de las que recibimos comentarios.

Tomemos como ejemplo la reciente actualización del Desafío Diario. Con ambos grupos en mente, podemos comparar muchos aspectos (incluyendo la participación diaria, la retención de los usuarios con la función, las edades de las personas que participan, etc). Eso nos ayuda a establecer si este cambio fue beneficioso y atractivo para nuestros jugadores como una nueva oferta. Si los resultados no muestran una tendencia positiva, podemos profundizar y comprobar si hubo algún problema. Al final, podemos intervenir y ajustar la característica o eliminarla por completo.

Por eso las pruebas A/B son esenciales para nosotros. Nos permiten acceder a datos más significativos basados en un entorno de pruebas en vivo. Con estos datos, podemos perfeccionar nuestras funciones e identificar posibles problemas.

Además, el lanzamiento de una nueva característica a un grupo más pequeño de usuarios nos permite supervisar los comentarios de forma más eficaz y evitar la posible avalancha de frustración que podría producirse si lanzáramos las características a toda la población del juego de inmediato.

Forge of Empires es, por supuesto, un gran juego. Cuenta con el apoyo de cientos de miles de jugadores en muchos mundos. Pero eso también significa que muchas cosas pueden salir mal. Las pruebas A/B son una necesidad absoluta si quieres aliviar el riesgo potencial de desvelar una nueva característica a una audiencia tan grande. Las consecuencias de lanzar una característica no probada pueden causar interacciones negativas con el juego, tanto para nosotros como para ti.

También es importante destacar que las pruebas A/B no son selectivas. Ningún jugador mantendrá ningún tipo de ventaja a largo plazo ni será preseleccionado para el grupo de prueba. Habrás notado que hay algunas características que no podemos probar A/B porque las ventajas serían demasiado grandes para ser justas, y queremos mantener la equidad en el juego. La selección para las pruebas es puramente aleatoria, y la equidad no es la única razón para ello; también es porque un elemento aleatorio es integral para la calidad de los resultados de las pruebas.

Esperamos que esto aclare por qué las pruebas A/B son fundamentales para nuestra estrategia de desarrollo y seguirán siendo un elemento fijo de las futuras actualizaciones.

Atentamente,
Tu equipo de Forge.
 
Arriba