全球知名公司Forrester曾在2010年提出“客戶時代”的概念，并認為在“客戶時代”，企業(yè)一定要轉型成為客戶癡迷型的企業(yè)，一切的行動、洞察和產品、服務都要基于客戶的需求存在。
如今我們已經步入“客戶時代”的下半程，隨著以云計算、大數據和人工智能為代表的現代信息技術迅猛發(fā)展，新興技術正與更多垂直領域的融合不斷深入。在這一穿越產業(yè)周期變革的過程中，如何以客戶為中心，以數據為驅動，實現智能增長，成為了各類企業(yè)與組織機構可持續(xù)發(fā)展與永續(xù)創(chuàng)新的關鍵。
作為“客戶時代”的“數智化”工具之一，火山引擎A/B測試正在被越來越多的企業(yè)所采納，并在策略優(yōu)化、研發(fā)、運營以及市場營銷等環(huán)節(jié)中進行了全面應用，有效地幫助企業(yè)穿越產業(yè)周期，在“客戶時代”的下半程中把握機遇，應對不確定性的新常態(tài)。
客戶時代，打破用戶增長以及營收瓶頸
4月26日，Forreste調研撰寫了《火山引擎A/B測試總體經濟影響白皮書》（以下簡稱《白皮書》），揭示了A/B測試對于企業(yè)營收增長、運營成本、生產力優(yōu)化等方面的重要影響。
在業(yè)內，A/B測試又被稱為小流量實驗，指對不同策略進行對比實驗，根據結果選擇最優(yōu)方案。互聯網時代，A/B測試被廣泛應用于產品開發(fā)和運營中，并成為業(yè)務增長與企業(yè)決策的一項重要工具。
火山引擎A/B測試經歷了字節(jié)跳動內部多年的打磨，于2021年正式對外開放。在實驗自動分流、流量正交互斥、指標設計和解讀、置信度統計等方面，火山引擎A/B測試都積累了非常成熟的技術基礎，其使用效果也得到了廣泛客戶的認可。
在《白皮書》的研究中，XYZ公司就是一家在火山引擎A/B測試下，保持著良性發(fā)展與健康增長的公司。作為一家注冊用戶超過8000萬，月活用戶數超過900萬的互聯網健身社交平臺，XYZ公司在經歷了前幾年的用戶高速增長后，已經進入穩(wěn)定增長期，用戶增長以及營收逐漸面臨瓶頸。
在XYZ公司營收來源中，主要依靠于廣告業(yè)務、付費會員服務，這也意味著用戶的增長是其發(fā)展的“命脈”，如何在“客戶時代”中充分提升廣告營收和會員運營收益，成為了現階段企業(yè)發(fā)展的核心訴求。
使用A/B測試產品前，XYZ公司對于廣告業(yè)務的推進主要建立在人為經驗判斷和客戶調研等方式上，在用戶對廣告的接受度及內容偏好的判斷和探究上缺乏有效方法和工具進行深入洞察。在會員運營收益方面，主要依據人為經驗判斷以及用戶調研確定價格策略，對于會員轉化路徑缺乏深入的數據分析支持。
正如XYZ公司首席技術官所言：“以前在調整價格策略的時候，除了用戶調研以外，就要根據經驗判斷去試，存在非常高的用戶流失風險，對營收的影響也無法做到準確的判斷 。”因此，如何通過數字化轉型打開業(yè)務增長的“新窗口”，是XYZ公司亟需解決的問題。
企業(yè)增長，通過A/B測試助力數字化轉型
針對這些“客戶時代”的增長困境，XYZ公司決定在內部引入火山引擎A/B測試來提升決策的科學性、探索廣告及會員營收增長的機會以及提升整體運營效率，并取得了良好的成效。
在提升廣告營收方面，火山引擎A/B測試針對不同特征的用戶進行不同方案的進行試驗，使得開屏廣告營收第一年提升100%；同時，通過廣告運營策略的優(yōu)化，區(qū)分用戶群、時間段進行廣告內容匹配，改善了用戶體驗；此外，在提升廣告CTR效果上，通過A/B測試優(yōu)化XYZ公司的廣告展示的個性化內容推送、布局以及用戶交互，使CTR提升了1% ~ 2%。
在提升付費會員服務方面，火山引擎A/B測試能夠實現小流量的用戶測試，并通過埋點對用戶行為及關鍵指標進行跟蹤分析，找到提升會員轉化的關鍵驅動因素；同時，火山引擎A/B測試也對會員價格策略進行了優(yōu)化，并通過試驗方法測試細分的用戶群對不同價格區(qū)間的接受度，得益于預測和數據科學能力，會員運營營收增長了20%。
火山引擎A/B測試對于XYZ公司增長上的提升，也得到了XYZ公司內部的廣泛認可。XYZ公司相關負責人表示，火山引擎A/B測試大幅度優(yōu)化了開屏廣告，廣告營收取得了翻倍的增長，這是以往無法做到的。
除了業(yè)務營收上的增長之外，火山引擎A/B測試也帶來了于XYZ公司產品優(yōu)化上線效率上的提升。通過火山引擎A/B測試的A/B測試上線方法，可以同步進行多個版本的測試，改進灰度上線方法，開發(fā)測試及運營人員可以分別提升20%及30%的效率。節(jié)省的時間可以用來進行其它工作，因此帶來生產效率的提升，XYZ公司帶來了更多的收益，大大提升了企業(yè)的行業(yè)競爭力。
在企業(yè)增長路徑中，火山引擎A/B測試讓業(yè)務迭代、新品研發(fā)能夠有的放矢，使原本不確定的決策，變成確定的決策，企業(yè)得以更加精準地洞察客戶的訴求。隨著數據工具成為企業(yè)經營發(fā)展的“標配”，A/B測試的重要價值也會更加凸顯，并成為“客戶時代”的增長利劍。（作者：李垂）
