4 月 20 日消息，字節(jié)跳動(dòng)副總裁、算法和數(shù)據(jù)技術(shù)負(fù)責(zé)人楊震原表示，火山引擎是字節(jié)跳動(dòng)旗下為企業(yè)服務(wù)的智能科技品牌，字節(jié)跳動(dòng)的 A/B 測(cè)試工具也已通過火山引擎開放給企業(yè)客戶。

A/B 測(cè)試是指對(duì)不同策略進(jìn)行對(duì)比實(shí)驗(yàn)，根據(jù)結(jié)果選擇最優(yōu)方案。在互聯(lián)網(wǎng)時(shí)代，A/B 測(cè)試被谷歌等巨頭廣泛使用在產(chǎn)品開發(fā)和運(yùn)營(yíng)中，有研究者也把 A/B 測(cè)試視為字節(jié)跳動(dòng)快速增長(zhǎng)的重要因素。

據(jù)楊震原介紹，公司成立之初，今日頭條就在做策略推薦類的 A/B 測(cè)試。2016 年，字節(jié)跳動(dòng)建立了支持大規(guī)模產(chǎn)品實(shí)驗(yàn)的 A/B 測(cè)試平臺(tái)，之后陸續(xù)接入抖音、西瓜視頻等全線業(yè)務(wù)，把 A/B 測(cè)試應(yīng)用在產(chǎn)品命名、交互設(shè)計(jì)、推薦算法、用戶增長(zhǎng)、廣告優(yōu)化和市場(chǎng)活動(dòng)等方方面面的決策上。

最新數(shù)據(jù)顯示，字節(jié)跳動(dòng)每天同時(shí)進(jìn)行的 A/B 測(cè)試達(dá)到上萬場(chǎng)，單日新增實(shí)驗(yàn)數(shù)量超過 1500 個(gè)，覆蓋 400 多個(gè)大大小小的業(yè)務(wù)。隨著公司發(fā)展，這些數(shù)字還在不斷擴(kuò)大。截至今年 3 月底，字節(jié)跳動(dòng)累計(jì)已經(jīng)做了 70 多萬次 A/B 測(cè)試。

楊震原表示，字節(jié)跳動(dòng)積累的技術(shù)能力和增長(zhǎng)方法，會(huì)通過火山引擎提供給企業(yè)客戶。火山引擎產(chǎn)品體系包括基礎(chǔ)服務(wù)、技術(shù)中臺(tái)、智能應(yīng)用和行業(yè)解決方案，字節(jié)跳動(dòng)的視頻編輯、特效、文字識(shí)別、圖像識(shí)別、個(gè)性化推薦等技術(shù)能力，都已在火山引擎上為企業(yè)服務(wù)，A/B 測(cè)試也是其中一款重要的數(shù)據(jù)產(chǎn)品，能夠幫助企業(yè)提高決策質(zhì)量，促進(jìn)業(yè)務(wù)增長(zhǎng)。

據(jù)相關(guān)產(chǎn)品負(fù)責(zé)人介紹，火山引擎 A/B 測(cè)試支持客戶端、服務(wù)端、推送、網(wǎng)頁、可視化建站等多種實(shí)驗(yàn)形式，具有功能全面、高度自動(dòng)化的特點(diǎn)，即使不會(huì)編程的人也能輕松做實(shí)驗(yàn)，而且有內(nèi)容豐富的實(shí)驗(yàn)報(bào)表，可智能產(chǎn)出實(shí)驗(yàn)結(jié)論，讓決策鏈清晰完備。

據(jù)了解，以悟空租車為例，該公司已通過火山引擎進(jìn)行了 70 多次 A/B 測(cè)試，約有 60% 為正向?qū)嶒?yàn)，提升產(chǎn)品轉(zhuǎn)換率約 40%，更直觀地量化了需求價(jià)值，極大地提升了效率。

與此同時(shí)，楊震原也表示 A/B 測(cè)試并不是萬能的，它也有很多局限性，比如提高商品推薦門檻、不推薦評(píng)分低的商品，如果做 A/B 測(cè)試，短期內(nèi)交易量肯定會(huì)降低，但長(zhǎng)期來看結(jié)論有可能逐漸反轉(zhuǎn)，這是長(zhǎng)周期影響和目標(biāo)設(shè)定的問題。此外，獨(dú)立的實(shí)驗(yàn)條件、統(tǒng)計(jì)置信度等問題都是做 A/B 測(cè)試需要考慮的。

楊震原表示，企業(yè)應(yīng)充分意識(shí)到 A/B 測(cè)試的優(yōu)勢(shì)和缺陷，對(duì)目標(biāo)選擇適合的評(píng)估方法。比如戰(zhàn)略型決策，需要專家角色進(jìn)行長(zhǎng)期的思考;很多細(xì)節(jié)的決策，如果能做 A/B 測(cè)試，要盡量做 A/B 測(cè)試，并且要關(guān)注到量化分析的執(zhí)行能力，真正做到數(shù)據(jù)驅(qū)動(dòng)科學(xué)決策。

關(guān)鍵詞： 字節(jié)跳動(dòng) 工具