在今天召開的火山引擎技術開放日活動中,字節跳動副總裁、算法和數據技術負責人楊震原首次揭秘了字節跳動如何使用A/B測試。火山引擎是字節跳動旗下為企業服務的智能科技品牌,字節跳動的A/B測試工具也已通過火山引擎開放給企業客戶。
A/B測試是指對不同策略進行對比實驗,根據結果選擇最優方案。A/B測試最早應用在醫學領域。十八世紀,一位英國醫生把患有壞血病的水手隨機分成六組,用不同方法進行治療,從而確定了檸檬和橘子能有效治療壞血病,這是人類有記載最早的A/B測試。在互聯網時代,A/B測試被谷歌等巨頭廣泛使用在產品開發和運營中。
楊震原介紹,字節跳動每天同時進行的A/B測試達到上萬場,單日新增實驗數量超過1500個,覆蓋400多個大大小小的業務。截至今年3月底,字節跳動累計已經做了70多萬次A/B測試。
(字節跳動副總裁楊震原。)
楊震原表示,字節跳動積累的技術能力和增長方法,會通過火山引擎提供給企業客戶。火山引擎產品體系包括基礎服務、技術中臺、智能應用和行業解決方案,字節跳動的視頻編輯、特效、文字識別、圖像識別、個性化推薦等技術能力,都已在火山引擎上為企業服務。
A/B測試是一款重要的數據產品,能夠幫助企業提高決策質量,促進業務增長。以悟空租車為例,該公司已通過火山引擎進行了70多次A/B測試,約有60%為正向實驗,提升產品轉換率約40%,以往需要一周時間的需求復盤數據分析,現在只要一天就能得到數據結論,極大地提升了效率。
在積極為火山引擎“帶貨”的同時,楊震原表示A/B測試并不是萬能的。企業應充分意識到A/B測試的優勢和缺陷,對目標選擇適合的評估方法。比如戰略性決策,需要專家角色進行長期的思考;很多細節的決策,如果能做A/B測試,要盡量做A/B測試,并且要關注到量化分析的執行能力,真正做到數據驅動科學決策。
(文/小智)
(來源:新湖南客戶端)