如何診斷產品健康 — 產品改變及季節因素

Ching Tien
9 min readFeb 9, 2021

原文出處:紅杉資本的:

  1. Diagnose Product Health
  2. Effect of Product Changes
  3. Seasonal Impact on Product
Photo by Marcelo Leal on Unsplash

監測產品指標是能判斷產品有沒有成功的最好方法。

關鍵指標能最好地代表產品整體目標 ,一旦選好關鍵指標,將這個指標往對的方向推進就變成了首要任務。這篇及下一篇文章會聚焦在如何偵測關鍵指標的變化原因,以及如何去分析這些變化。

指標數字的改變通常都跟下列的因素有關:產品改變、季節因素、競爭壓力、混合位移以及資料品質。我們會深入探討如何理解這些因素,以及詳細說明如何分析這些因素所造成的指標數字改變。

在這篇,我們會討論產品改變季節變化這兩項因素,下一篇會涵蓋競爭等外部因素、使用者組成所造成的混合位移、資料品質可能造成的影響。

產品改變

在實驗性產品快速迭代的思潮下,近年的新產品開發數量呈現爆炸性的成長。當產品有了新的改變,使用者的反應幾乎都會反映在關鍵指標上。因此,我們需要清楚了解這些新改變所造成的影響,確保結果如我們所期待的一樣。

舉例來說,2014 年的七月,Facebook 發佈一個重要通知:他們移除了 Facebook 應用程式有直接的訊息功能,並且另外發布 Messenger 應用程式。在一個月內,這件事情就造成美國有接近兩千萬名 iOS 用戶下載了 Messenger。

舉另一個例子,如果你的產品有推播功能,那用戶使用產品的路徑可能是這樣:看到推播通知的用戶有一部份點按了通知、一部分進入你的產品頁面、一部分花時間使用產品。因此若是產品推播通知的演算法改變了,除了整體產品的指標會受影響之外,這過程中的每一個指標也都會受到這個改變而有變化。

然而,產品改變並不全然都是有益的。像是產品有 Bug 就可能會妨礙使用者下載、更新或是造成使用 App 的體驗受損,這樣的 Bug 會嚴重的影響你的關鍵指標。因此,請仔細地追蹤你的關鍵指標,尤其是在產品有重大的改變或更新之後,這樣可以幫助你了解、偵測並控制這些 Bug 可能造成的傷害。

衡量產品改變造成影響的方法就是 AB 測試。在 AB…

--

--

Ching Tien

認知心理學及數據策略背景,有管理顧問、遊戲業、金融科技、房地產科技及新創圈的經驗。著迷於行為分析的資料科學家及產品經理。