万学教育（海文考研）秋季集训营推广页面优化

公司简介

北京万学教育科技有限公司是一家教育公司（简称“万学教育”），创立于2006年，2007年开始正式运营，凭借超越传统的革命性教育模式，已经成为专注为18岁以上人群提供学业与职业高端培训服务的中国龙头教育机构。万学教育旗下海文考研是中国研究生考前培训事业的创始和一流机构，开辟中国考研培训领域，创造了考研培训的辅导技术和服务模型，代表中国考研培训界的一流水平。基于万学教育卓越的教育理念、模式和效果，万学获得红杉资本、联想投资、DCM基金、百度、浩然资本、华富嘉辰等多家著名基金多轮巨额投资，并连续六年被新华网、中国网、腾讯网、新浪网评委中国十大教育集团和行业领军企业。

案例背景

每年9月份是备战考研的黄金时期，各大培训机构都会在9月份进行培训招募。作为万学教育集团的主营产品，海文考研可谓是中国研究生考前培训机构最早的品牌。为了充分应对即将来临的黄金招募期，海文考研今年的秋季特训营线上推广活动页提早进入了准备阶段。根据市场人员的要求，网页设计师设计了三版活动页面，他们需要借助A/B测试的方式找到能带来最高转化效果的方案。

测试方案

AppAdhoc A/B Testing采用科学的试验流量分割，使得每一组试验对象具备一致的用户特征，并在试验过程中也可以随时调整用户流量，使企业可以在新版本上线之前，以最低成本观察客户对多个优化方案的数据反馈。同时，根据试验的数据发现客户反馈最好的版本，作为最终的新版本迭代方案。

目前海文考研秋季集训营推广活动页面的架构主要包含：首页banner，学生学习痛点、自身优势展示和学生评价四个部分。市场部门针对这4部分，提出了三版不同的设计方案，具体如下：

同时，将用户在不同风格推广页面的咨询转化数据，作为本次试验的核心关注指标。

测试目标

本次试验的主要目标是，对比不同设计风格的招募推广页面的转化情况，找到能够最大化用户咨询率的设计版本。

A/B测试数据反馈

此次试验在Web端进行测试，运行周期为12天（一般来说，为了获得更加可信的数据结果，试验运行周期应至少保证1-2个完整的自然周，当有新功能发布时则应适当延长试验周期）。在对试验数据进一步分析后，市场部门得到了科学可信的数据结果。

-试验版本1胜出，尽管两个试验版本的样本数据相较于原始版本都有提升，但试验版本2的置信区间并不收敛，说明结果不显著，而试验版本1的样本均值表现最佳，且指标收敛可信，能够给页面带来最高的咨询转化量，增长幅度达到55%；

-通过试验数据分析，市场部门决定将试验版本1作为考研秋季集训营活动页面的最终设计方案，并进行全量推广。