標籤:

你們公司是怎麼做AB測試的?

AB測試作為對比某幾種方案優劣的方式,可以有效降低產品經理在做產品決策過程中出現拍腦袋決策、重複無用改版的情況。那麼你們公司都是怎麼做AB測試的呢?技術細節如何實現?在AB測試過程中遇到過什麼有價值的問題?


真問對人了,就是「做」A/B測試的

歡迎來http://www.appadhoc.com體驗A/B測試


謝邀

事實上A/B test對於驅動產品開發和管理層決策的門檻還是很高的,對於整個產品開發團隊從決策、管理到設計和開發、運營中的各個環節都系要保持高專業素質並且部門間磨合很好,另一方面,我相信為數眾多的小公司甚至是部分中大型公司在對於A/B test 的真正實施和最終結論都會有一定的差距(至少我們公司是這樣的,可能公司規模比較小,能力有限)。

A/B test 簡單點講就是保持定量維度一致性,通過變換若干變數數值來得出不同方案,並對已確定用戶群進行分別投放測試,及時獲取反饋信息和相關數據。

由於公司項目細節是保密的,所以我就簡單分享下在做A/B test 時需要注意的幾個問題吧,見笑。

  • 每次測試有且只有一個目標,任何變數的選取都是圍繞這個目標進行。
  • 嚴格定義「好」的標準。
  • 如果目前網站流量較小的話可能A/B test結果並不能反映實際情況。(如果流量太小實在是沒有必要做測試)
  • 對測試數據保持敬畏之心,要數據說話,但是又不能迷信數據。
  • A/B test 是一個長期過程,只有長時間測試精確度才會無限逼真。 個人見解哈,目前來說我們公司項目在A/B test方面做得並不太好,還需要繼續努力啊!


如果是小公司做A/B測試,我建議直接使用吆喝科技這樣的第三方專業做A/B測試的軟體工具,會更快。

如果覺得不用這麼複雜的功能,就是簡單的A/B頁面測試,GA,google analytics應該也是可以的。


個人用的是Google Optimze,直接可以在Google Analytics里看測試數據,基礎版免費且易用,讓技術幫你裝個代碼就能隨時開始做測試。至於是否能發現有價值問題,常取決於你的測試目的和如何分析測試結果。


推薦閱讀:

如何做網站A/B測試,有什麼專業的工具?
實施AB測試的阻力在哪裡?
推薦系統中的A/B測試,誰能詳細說下思路?

TAG:AB測試 |