更多技能交流、求职时机，欢迎重视字节跳动数据平台微信大众号，回复【1】进入官方交流群
随着国内游戏用户数量趋于饱满，中国游戏工业也从高速成长期逐步转型，商场老练度提升，竞赛趋于精细化。
随着游戏出海以及私域流量运营的应战，游戏企业对数据剖析的运用需求和依赖度进一步进步。而在游戏研发立项、验证、开发、测验、上线和运营等阶段 A/B 测验均能发挥重要作用。
本文讲述一个通过 A/B 测验取得“数据驱动增加”才能的游戏产品故事。并介绍在游戏的研发推广的全流程中，A/B 测验都能使用于哪些场景。
快速试错，A/B 测验打磨爆款游戏
游戏行业发展至今，先后阅历了主机游戏年代、网页游戏年代、移动游戏年代等多个阶段，如今移动游戏收入占国内游戏收入的 7 成以上，许多传统游戏公司正面对着转型压力。而随着游戏技能的日趋老练，大批新式公司涌入该行业，进一步加剧了竞赛压力。
游戏研发流程大致分为立项、验证、开发、测验、上线预备和运营六个阶段，每个阶段往往都伴随着许多修正。
修正的作用怎么？关于核心目标是否会有负面的影响？传统的思路，是将新特性上线后验证作用，但这也往往存在上线周期长，过火依赖经历，影响面广等问题。
A/B 测验能够完美地解决上述痛点。它通过在线上流量中取出一小部分，彻底随机地分给原战略 A（对照组）和新战略 B（试验组），再结合科学的计算办法 ，得到关于两种战略相对作用的准确估计。
A/B 测验运用线上小流量即可验证作用，并能够有用地衡量不同战略的收益。
“全民弹弹弹”的 A/B 测验故事
在发行时曾荣获“年度最佳休闲游戏”大奖的《全民弹弹弹》，是超休闲游戏类的爆款产品代表。它是一款操作简略、极易上手的球跳塔类休闲游戏，玩家既能够让弹球一层一层地击穿五颜六色砖块，享用朴实的弹射快感，也能够解锁更多未知的球球，体会组成的养成趣味。
在这款游戏研发和推广进程中，学习了字节跳动的增加经历，接入了字节自研出品的 A/B 测验产品——火山引擎 DataTester，对游戏的多个环节进行了 A/B 测验。
在《全民弹弹弹》的游戏运营环节，为验证游戏主页对玩家留存和广告数据的影响，设计了两款主页计划通过 A/B 测验进行玩家留存数据的对比：跳塔页（左图）、组成页面（右图）。
通过在 DataTester 中运行 2 周的试验测验，成果显现，主页为组成页（右图）的页面在用户 3 日留存、用户 7 日留存以及广告作用等核心目标中，均显着优于对照组跳塔页（左图）的计划。
在 A/B 测验的数据成果支撑下，《全民弹弹弹》最终全量上线了组成页面的计划，并取得了优异的作用。
一款游戏从研发到打磨，再到上线后的不断调优，全链路均可通过 A/B 测验提升效率和决策准确度。除上述场景外，DataTester 还能在游戏产品中，使用于以下场景：
1.验证新手引导改动，新手使命难度调整，初始资源调整等
2.验证关卡难度、配备爆率、宝箱中奖率调整等影响游戏体会的的改动
3.验证商城界面，积分系统，公告栏、banner、按钮、图标等功用性区域的改动
4.验证匹配系统、老友系统、聊天系统等交际性功用改动
5.验证游戏 IP、NPC、游戏场景、剧情的改动
试验分层，可无限拓展试验流量
在游戏内测阶段，常常会遇到需求多个 A/B 测验并行的场景：
小 A 要验证新的武器系统，需求 50%的流量验证；小 B 修正商城界面，也需求 50%的流量；小 C 对新手使命进行了完善，同样需求 50%的流量验证。此时同时进行 3 个试验，需求 150%的流量。
线上流量不够用，只能对试验进行优先级排序，让几个试验先后进行，但这会导致效率低下。
火山引擎 A/B 测验 DataTester 流量分层技能，将整体流量复制“很多遍”，形成”很多个”流量层。流量层两两之间彼此正交，再加之运行在相同层的试验流量互斥，从而保证同时运行多个试验不会互相干扰。
试验分层技能能够有用的解决线上流量不足的状况，尤其是在游戏内测阶段，这个阶段往往获取用户难度较大。需求通过发布内测使命，小规模买量等方式取得游戏玩家，流量获取本钱高。
而这个阶段既需求验证游戏的功用、兼容性，又要对游戏的玩法、关卡设置、故事剧情、营收模型等进行调整。
如果内测时刻过长，不只需求继续的买量投入，也会导致游戏上线节奏被拖慢，乃至可能错失商场热门。通过 DataTester 试验流量分层技能，打破流量限制，大大缩短游戏验证时刻，快速上线迭代。
3 大试验场景，进步游戏推广效率
除了传统的客户端、服务端 A/B 测验以外，火山引擎 DataTester 还设有 3 大针对特殊场景的 A/B 测验才能，能够大幅提升游戏在广告投进、信息推送等场景下的效率。
- 推送试验： 通过对推送告诉的标题、内容、点击动作等进行测验，找出作用最优的计划。
DataTester 支撑多种推送通道、设备类型；可使用于游戏的拉新、召回以及活动推广等场景，及时响应作用，避免负面影响。
- 广告试验： 提升广告投进 ROI，可对比不同的试验文案、不同的投进渠道的广告投进作用。
DataTester 能够通过转化增效度量的方式来操控“自然转化”对试验作用的影响，保证广告试验的科学性和严谨性。
- 可视化试验： DataTester 能够达到所见即所得的 A/B 测验装备，新手小白也能直接上手运用。
通过所见即所得的在线编辑，降低在 Web/H5 页面优化的场景下，产品方和运营方运用 A/B 测验工具的本钱。可用于游戏活动的推广页面，抽奖页面的作用对比，无需编程即可快速上线。
上述才能均来自于字节跳动在多年事务打磨中，完结过 150 万余次 A/B 测验的经历积累，因此产品在实用性和易用性方面才能极强。
出海游戏，DataTester 保驾护航
如今全球化运营已经成为新的趋势，海外游戏营收相较于国内有着更高的增加性。国内自研游戏纷繁出海，快速抢占要点区域份额。与此同时也带来了差异化运营、全球化发布、信息安全等全新的应战。
- 区域差异化运营
由于各国文化、宗教信仰、潮流趋势的差异，相同的游戏活动和修正，在海外不同的区域往往取得的收益各不相同。关于公司来说，海外不同区域的差异化运营，往往需求积累各地的运营经历，本钱通常较高。
盲目的推广，又容易导致一些负面的影响。DataTester 的 A/B 测验支撑圈选不同区域的游戏用户，能够针对不同区域的用户展开针对性的测验，能够快速的比较试验成果，确认该区域的最优计划。
- 全球化发布
全球化发布也是公司在出海进程中所不得不面对的应战。全球化发布意味着运维本钱的进步，同时多版别的管理也增加了发行的复杂性。
DataTester 运行中的 A/B 试验，支撑直接转换为特性进行发布。同时支撑渐进式发布、定时发布，以及回滚操作等。通过运用特性发布功用，使发布流程更加简练，削减发布风险。
产品介绍
DataTester 是火山引擎数智平台旗下产品，通过抖音、今日头条等字节事务多年验证，累计开设过 150 万次 A/B 测验，可根据先进的底层算法，供给科学分流才能和智能的计算引擎，支撑多种复杂的 A/B 测验类型。
在使用和剖析场景上，DataTester 深度耦合推荐、广告、搜索、UI、产品功用等多种事务场景需求，为事务增加、转化、产品迭代，战略优化，运营提效等各个环节供给科学的决策依据，让事务真实做到数据驱动。
现在，DataTester 已在外部多家企业上线使用，将老练的“数据驱动增加”经历赋能给游戏、汽车、大消费、金融等多个范畴。
点击跳转，申请 DataTester 免费试用、了解更多 DataTester 概况。
