如何量化評估知乎首頁最新動態(feed)的效果?

知乎首頁feed已經改了很多次,每次改版都眾說紛紜。

那麼如果你作為知乎的產品經理,如何去評估feed的效果?

直觀的辦法,就是看用戶反饋,然後去解決用戶提到的主要問題。但這種方式是有局限性以及潛在風險的。

通過數據量化評估是必須的,那麼量化模型是怎樣的?如何利用量化模型去進一步迭代?

先拋磚引玉,我能想到的量化模型是:

1,最終轉化率:使用feed的用戶數和點擊量

2,滿意度:

1)用戶平均點擊量/feed平均展現量 (這個指標評估feed的推薦效率)

2)用戶停留時間。

這個模型可以大致衡量效果,但其問題在於,無法輔助去更好得發現問題和進行優化設計。求各位分享下其他思路。


第一次打算認真回答問題,有點緊張,回答的很糟糕,只希望可以給各位高手拋磚引玉:)

發現問題:

以整體為對象分析:

從8.16的改版到今天的8.30,已經過去半個月了,因為這次改版最主要是feed的規則變動。分析這半個月網站IP、PV、PV/IP、用戶停留時間並與改版前對比(注意考慮各個指標的增長因素)就可以評估這次feed的效果了。

以feed為對象分析:

主要分析指標:點擊量、整體轉化率(點擊量 / feed展現量)、彈出率。

以用戶為對象分析:

做可用性分析,分析用戶使用路徑,並匯總數據進行分析,這個參看@馮沁原,具體就不展開了。

以問題為對象分析:

問題傳播的的平均廣度與深度。

分析問題:

要解決問題,首先就要認識到知乎此次改版的目的,並對問題進行分析,然後找出解決方案。

目的:我認為,知乎這次改版的主要原因是因為大量的低質量內容充斥feed,希望可以通過展示「 名人follow」來提高feed的質量(畢竟知乎的使用群體普遍比較高端),從而降低信噪比。

問題:feed的質量確實提高了,但卻很難切合用戶的需求。

解決問題:

1、多標籤,即傳統feed和新feed-----成本最低,但無助於解決最初的目的,不是很建議;

2、將傳統feed進行改造,這裡借用@黃海均 前輩的圖來展現feed的組織:

重新回放一下目的,我們需要的是:高質量的問題 + 感興趣的問題 + 高效的展示。

那麼,有一個思路:

  • 對 「我關注的人 」和「我關注的話題 」的動態進行「 並 」處理,在保證高質量的同時,增加精確度;
  • 對 「我關注的話題 」的動態進行 「 社會化過濾 」,並優化動態上浮和下沉的機制,被過濾掉的動態下沉的會更快;
  • 將相同信息進行合併:對同一個問題、同一個答案的動態進行合併,以降低噪音,提高展示效率;

ps.具體的方案構思起來很複雜,思考了一下午,希望可以建立一個清晰的模型去建設一個新的feed。才發現需要考慮的東西非常非常之多,也相信知乎的大大們把該考慮的東西都考慮到了。突然想到@周源 說過:「別著急,一切都在計劃中,這將是我們近期的下一次重要升級——話題改版。 」

想像不出來會是怎樣的形態,但相信一定會出乎我們的意料,期待ing!!!


看樣子,你把大家想說的都說完了啊。我覺得,你所說的措施都是在已經有了一個相對具體的結果後所作的分析。實際上,你的問題是,在沒有任何可分析的數據的時候,該怎麼辦,也就是無到有的這個過程要怎麼解決,對不?我覺得,這個時候,已經不能寄希望於數據,而應該從其他方面著手。比如,分析目標用戶群的特點,然後預測他們會需要什麼樣的東西。互聯網產品都是基於用戶的,一切答案都在用戶身上。


推薦閱讀:

成功的開源軟體都有什麼樣的特點?
想去英國讀研 產品設計或工業設計方向 想比較一下皇藝 中央聖馬丁 考文垂 愛丁堡 和創意藝術大學?
有多少人拿著6s,7卻從來不用甚至不知道3dtouch?
如何理解產品設計中的概念設計、功能規劃?

TAG:知乎 | 知乎產品改進 | 產品設計 | 知乎產品 | 信息流廣告NewsFeed | 效果評估 |