如何做網站A/B測試，有什麼專業的工具？

01-24

特別是原型階段的測試，有什麼工具？

做網站的A/B測試，用谷歌分析裏的實驗功能已經可以滿足一般的需求。

如閣下負責一個中大型的網站，A/B測試是一個必須進行的優化程序。強烈推薦。

詳細：「內容實驗」介面

其他介紹：Google Analytics 實驗(A/B 測試)

－－－－－－－－－－－－－－－－－－－－

補充：

之前為一家公司做了一次的A/B測試的優化，為轉化率提升了16%。

很多時候做網站的設計純以長官意志為依歸，但A/B測試能讓你以數據和成績說話，

有力的同時是可行有效的。

如何做網站A/B測試？我把這個問題做了分解：

什麼是A/B測試？
為什麼要做A/B測試？
具備什麼條件適合開始做A/B測試？
如何開始？
用好A/B測試需要思考的幾個問題。
選擇合適的工具。
切記過猶不及。

----------------------下面是分割線-----------------------

什麼是A/B測試？

A/B測試的概念和定義講過很多，簡單來說，它是我們用來測試兩個不同版本的登陸頁面的轉化率的方法。你可以測試哪個版本能更好地引導用戶達到你的目標，比如：註冊、提交信息等。你可以測試哪個版本的效果更好，比如：更低的流失、更高的轉化、用戶更喜歡的體驗。你當然還測試兩個完全不同的頁面，也可以測試頁面上的一些微小的調整，比如改動文案用詞會產生什麼效果等。

為什麼要做A/B測試？

進行A/B測試能幫助訪客更好地和網站進行交互，從真實用戶中得到真實數據來支持你的設計決策。有很多很棒的工具可用來做A/B測試，這讓很多非技術人員也能輕鬆地運行A/B測試試驗。

如何選擇A/B測試的時間節點？

只有當你已經擁有一定量的訪客和轉化（conversion）時，就可以立馬進行A/B測試，當然測試周期是根據訪客數量和你要求達到的統計顯著來計算的。（轉化通常指，用戶完成了某項你想讓他做的動作，比如一次登錄，一次購買，這由你來定）。

理想的訪問數量根據你特定的轉化率的不同而不同。假設每個變數（目標）的轉化率至少需要1000個訪客，每個變數（目標）需要150個轉化，有些網站可能只要幾個小時就完成了，而有的則需要一個月。

為了弄清楚執行一個A/B測試具體需要多少訪客，你可以在Evan Miller』s樣本量計算網頁中插入幾個基本參數。

A/B測試的一大特點就是成本極低。在做A/B測試前你不用投入太多的資源，你不必建立產品，完全可以在初始頁面上測試未來用戶對你計劃的功能和價格層會有什麼反應。

你的第一次A/B測試：由淺入深

第一次做A/B測試，盡量保持簡單。輕微的調整你的登錄頁面，關注與那些用很少精力就能達到的目標，比如：

副本 h1 和 h3 標題
CTA 按鈕文字（例如：「免費試用」 vs. 「註冊」 vs. 「開始」）
CTA 按鈕的顏色、大小以及位置
頁面長短：短頁面 vs. 長頁面
……

你可以一次測試多個變數，不僅僅只調整兩個屬性。也可以一次進行多個A/B測試，但是一開始最好只專註其中一個，由淺入深嘛。

你可以從任何地方開始A/B測試，時間從一兩天到一個月不等。A/B測試工具會報告哪個測試版本是統計上顯著的優勝者，然後你就可以更新底部代碼使這個優勝變數成為網站最終版本的一部分。

完成這次A/B測試之後，就可以繼續前進了，去驗證更多的假設。

何去何從---用好A/B測試需要思考的幾個問題

以上提到的是花最少的精力就可以達到的目標，但是A/B測試絕不僅僅是這樣。當然，測試按鈕的顏色和標題副本可以提高你的轉化率。但是我們需要跳出這種思維框架，想想除了頁面外觀之外的一些東西：

強調產品功能還是強調產品效益

在檢驗產品時你是否更傾向於注重產品功能。通過向消費者描述一副他們夢想的情境來說明產品的效益。

加快頁面載入

使登陸頁面保持極簡，並且載入速度小於一秒。

展示和人交談的視頻

試著把截圖拿走，拖入視頻，視頻以和在攝像機前的人交談的方式說明產品，以幫助和用戶建立一種人際關係。

調查新用戶

和新的用戶交談，弄明白是什麼使他們註冊產品，目前什麼對他們最有價值。在隨後測試中強調這些。

搞清楚什麼會使新用戶感到困惑

問問新用戶網站中什麼地方使他們感到困惑，什麼問題他們不會回答。在A/B測試中加入這些問題。

增加用戶評價

通過客戶評價的的方式來獲得社會認同。在每個客戶名字的旁邊放上頭像或者公司的Logo。

改變標題和主要內容的寫作風格

在博客中改變你的標題和內容的寫作風格，看看這會如何影響訂閱情況。試著為同樣的文章寫兩個不同版本。

對產品價格和商業模式進行試驗

改變你的價格體系，即使只發布在產品的公眾主頁上，看看潛在用戶會何如反應。

使註冊過程簡短

移除註冊形式中不必要的步驟。

根本上改變設計

嘗試不同的登陸頁面，正如Campaign Monitor用大模型為新訪客所做的。

記住轉化不是一鎚子買賣。當你說你想要更多的註冊量時你真正想說的是你想要更多的生命周期。當你說你想要更多的播客聽眾，你真正想說的就是你想要獲得更多忠實的聽眾，他們會不斷地把你的產品介紹給朋友。

監測A/B測試將會如何影響你的長期目標。

工具的使用

推薦用吆喝科技的A/B測試工具，它是一家 Google 背景的A/B測試服務商，提供友好的中文界面，完善的技術支持，以及極其易用有用的功能。當然國外也有一些類似工具，比如 VWO 、 Optimizely 等。 AppAdhoc支持編程模式和可視化模式，從網站到移動應用都可以用它來進行A/B測試。

切忌過猶不及

A/B測試不是萬能葯。優化轉化率能使一個好的登陸頁面更好，但是若一個產品或者公司有根本問題，A/B測試是無能為力的。狹隘的關注A/B測試會把用戶僅僅變成一些數據點。用戶不是被倒在沙漏中的轉化次數，他們是有著具體問題的具有的人，他們是到你的網站中來尋找解決問題的方法的。

不要為了短期目標而立馬向用戶出售商品。在站點中放置一個巨大紅色的「免費試用」按鈕會增加轉化次數。這雖然會讓你的商業業績在12個月內不會有好轉，但是要在頭腦中保有長期目標的思想。這也是為用戶體驗著想呀。

A/B測試的目的不是誤導潛在用戶去買他們不想要的商品，而是確認你如何你傳達產品的效益以及確保用戶明白了你所使用的語言。只要你有自信認為你的產品很棒，那麼就用A/B測試調整你向用戶呈現你產品的方式。如果你知道你的產品對用戶是有幫助的，那麼不要試圖操縱用戶。總是把產品放在第一位。

最後，不要忽視你的直覺。你可以用數據支持你的直覺，但也要依賴你的工作經驗。不要成為一個百分百靠數據驅動的人。

答案來自吆喝科技博客：A/B測試實踐Roadmap:從菜鳥到專家

相關的可能還有：

如何用A/B測試做網站測試？

移動應用A/B測試終極清單

那些年我們在A/B測試中踩過的坑

……

什麼是 A/B 測試？ - Mil Max 的回答

http://AppAdhoc.com：吆喝科技開發的在線AB測試平台，用數據幫助開發者優化產品，是國內唯一同時支持前端（Web/H5、iOS、Android）及後端（Node.js、PHP、Java）AB測試服務的專業Saas平台。

平台特色：線上灰度發布、多維度數據統計分析、定向測試等等。

通過AB測試來優化產品的方法在海外已經被廣泛應用，現在這種代表先進生產力的方法如同GitHub、Docker、APM一樣也正在逐漸被國內廣大開發團隊所接納。AppAdhoc優化平台能夠幫助用戶提高產品的設計、研發、運營和營銷的效率，降低產品決策風險，同時也能夠幫助用戶用數據優化移動廣告，讓流量的變現價值更大。

以前我有寫過一篇文章，其實並不難

實施網站A/B測試併兼顧SEO不受影響的解決方案

A/B測試終極指南

http://ucdchina.com/snap/7203

最後面列舉了一些工具，我沒有驗證過

一套 A/B testing 工具包含：Server（隨機分配演算法）、Client（web、iOS、Android）、數據展示/Dashboard

SaaS 可以看這個列表 http://autosend.io/blog/ab-testing-tools-mobile-apps/

Self-hosting 可以看看 https://github.com/seatgeek/sixpack

免費的, 谷歌的Website Optimizer.

或者花點錢買Visual Website Optimizer,簡單易上手.

這個 UsabilityHub 神器，做A/B test非常好用

因為谷歌被牆，所以要找個a b 檢驗的平台真不容易。而能架構這樣平台的人都在大公司貓著呢，我蠻想寫一個的其實。。。

理論上簡單的A/Btest不需要專業工具即可進行，比如連續測試只要做好投放時間計劃，控制其他變數；同步測試做好分流就可以進行了。推薦一篇關於A/B測試比較系統的文章，其中案例是基於omniture，當然工具並不是重點 http://blog.easytrace.cn/?p=71

給大家推薦一篇Google 內部使用多重實驗架構的文章，貌似比國內這些寫的都深入一些，重點在AB 測試部分 Google 重疊實驗框架：更多，更好，更快地實驗

從你字面理解你似乎更需要灰度發布