12月13日木瓜移动&Facebook在线研讨会【游戏出海：如何利用A/B test提升投放成效？】现场Q&A新鲜出炉，由两位木瓜高级优化师王骁琦&Aggie倾情解答~ 如果还有不懂的问题，欢迎加入Facebook游戏QQ研讨群：215277373
视频回顾请点击：游戏出海：如何利用A/B test提升投放成效？
1、Landing page着陆页可以做A/B测试？
当前可以进行拆分测试的变量有创意、受众、投放优化以及版位；对于landing page则可以通过投放优化方式来优化其点击和展示情况；如果是App Store或者Google Play则可以在商店里进行商店页面的A/B test。
2、广告一般测试多久合适，测试预算设置为多少？
建议测试4天以便获得最可靠的测试结果，如果您不确定测试多长时间为宜，可先测试4天时间。通常而言，测试时间至少要达到3天，最长不宜超过14天。测试短于3天可能导致数据不足以准确地确定表现最佳的广告组，而测试长于14天可能导致未有效使用预算，因为通常在14天以内就可确定哪个广告组表现最佳。如果您不清楚设置多少预算合适，可使用Facebook建议的预算。预算和受众会分配到各个广告组。也可以根据需要选择是均匀分配还是加权其中某个广告组。
3、请问一次测试多少条创意比较好？
建议每个ad set设置一条广告创意，可建立2-5个ad set同时来进行测试。另外，需要注意的是，在测试不同的广告创意时，只需测试单个变量即可。如果广告组包含多个不同的创意元素（例如不同的图片、标题和文本），那么确定获胜的广告组后，您并不能知道哪个因素使之胜出。
4、请问，测试期间可以怎么样来定呢？按照时间？按照共同的展示量还是其他的？
在测试时候，是只针对一个变量进行的测试，那么获胜的广告组是通过对比每个广告组的单次成效费用来决出的，在测试结束之后会在广告管理工具中得到通知，也会收到相关报告邮件。
5、请问，测试素材建议用什么出价方式？
如果是新上素材，对素材表现没有把握的情况下，建议使用auto bid（自动出价），这在新的出价模式中是lowest cost（最低价格）。这能保证我们的素材获得充分的曝光以及最低的价格参与竞价环节。
6、在解读A/B测试结果时，如果测试目的是素材CTR，数据显示素材A的CTR低，这时应该判断出素材A淘汰，但如果同时看到素材A的CR和ROI更好，这时淘汰素材A会不会有风险？
制作AB test的目的是可让您测试不同的广告版本，从而发现哪些广告方案的效果最理想，并改进今后的广告。那这些改变也是来帮助促进可以获得更好的ROI，如果某条广告在测试期间相对其他广告来说效果一般，但是却有着较高的ROI 测试结束之后可以对其进行分析，继续保留投放。
7、如果测试定位人群，系统分配的人群比例是多少？
如果在除变量之外的设定不变的情况下，系统会根据测试的广告组的数量平均分配；如果在设置预算的时候进行了个别广告组的加权设置，系统也将会按照这个预算分配比例进行人群分配，比如ad set A预算加权90%，ad set B只要10%，那么人群比例的分配就是90%和10%。
8、请问，A/B测试是以什么数据标准来作为判断依据？
为了数据的可靠性，我们的测试必须具有代表性。因此建议每天的转换量至少在20个。在不同的地区，展示量会有变化，考虑到我们大多时候使用的是oCPM来进行的投放，因此建议以安装量作为最基础的衡量指标。
9、A/B测试预算最少为多少？太少是否影响到获得展示的机会？
建议的预算设定在200-1000美金进行每一个ad set（广告组）的设定。通常设定为500美金/组可获得相对合理的曝光机会。
10、A/B测试是在游戏上架前进行还是游戏上架后？
产品上线前因为我们没有产品，因此建议前期我们测试的素材可以是video views（视频观看量）或者推广Pages（粉丝页）作为测试点。产品上架后的测试因为成效地点的变换，此时才方便测试其他变量。
