Designing with Data - 第三章 試驗的框架
前言
最近我在讀 Designing with Data|善用數據幫你打造好設計 這本書,因此有一系列的記錄,想直接參考這系列所有文章請看系列文連結。
章節簡介
這一章節簡單介紹實務上的作法,實務上會運用框架來進行收集數據並分析,主要包含三個階段:
- 定義
- 執行
- 分析
此章節會概略介紹框架,而之後的章節會更深入介紹這些階段的細節。
另外,這篇開頭也提到,數據和設計其實不應該完全區分開來,設計師應該參與收集數據、解讀數據以及應用數據,並且不斷地應用 測試 來優化產品,持續迭代來去除不好的體驗。
框架簡介
框架的基礎大致可用以下幾點描述:
- 首先定義想達成的目標,目標通常會和企業運作成功有密切關係,也可將目標描述成想提供的理想體驗。
- 接著針對想達成的目標定義焦點,而焦點可能會是想為使用者解決的問題,也可能是尋找機會點來提供使用者不曾有過的體驗。
- 再來定義假設,有結構地描述對於使用者即將要測試的產品的假設,可以同時有一個或多個假設。
- 打造測試,做出能代表設計概念的體驗,並讓部分使用者進行測試。
- 最後,得到測試者對於測試的反應,再分析這些反應得到結果,然後可以利用這些結果來決定下一步。
這邊直接引用 官網 Chapter 4 的圖:

此圖其實是定義階段的介紹,實際運用框架的過程,可能原先會有許多種假設,但後續得到更多的數據,就可以去除某些路徑的可能性。
例如數據證明某個假設不正確,或是數據顯示某個假設得到的效益不符合期待,那原先可能安排在那假設之下的步驟就不用繼續進行。
案例:數據與設計實務
這部分開始帶入一些業界資深人員的經驗談,我擷取部分內容下來。
Airbnb 的設計主管 Katie Dill 提到:
當新功能推出一段時間之後,我們收集到足夠有用的數據,可以透過結果來判斷這個實驗是成功或失敗。一般來說,如果它有達到預定的目標,並對其他的關鍵指標有正向影響或沒有影響,我們就會保留這個功能。若它沒有達到目標,或是對其他部分有負面影響,我們就會退回這項實驗,並移除這個新功能。儘管如此,有時候有些功能可能對於指標有負面影響,但由於其他的好處或長期的規劃,我們還是會保留它。
曾經任職於 Etsy 的 Dan McKinley 的故事:
在第一個階段是要對網頁進行大幅度的重新設計。於是我們前半年都在做大幅度的改變,來看看有沒有哪個我們滿意的版本能和舊版本的績效相似。我們認為將 5% 的流量導向新的版本並不會讓人們太生氣,於是就這麼做了。我們以兩週為間隔,從一月到七月之間不斷進行迭代,嘗試各種不同的東西。我們最終找到一個和你現在看到的網頁差不多的版本。它的表現和原本的舊商品列表頁面很接近,略差一點點。因此我們說:「好,那就用這個並且去優化它,直到它的績效比原來的更好。」
我認為它同時也是我們做過最成功的產品。它結合了許多不同的方法。在第一個階段時,我們結合使用者回饋以及質性研究來了解為什麼一個方案比另一個好。而在決定了變更候選方案之後,就開始運用 A/B Test 來得到最後的產物。
心得
這個章節簡單介紹了作者在實務上運用的框架,可以大略知道正規流程是怎樣。
另外從兩位資深設計師提供的經驗也學到一點知識,在優化產品過程往往會遇到許多候選方案,或許這些方案都可幫助團隊達到目標,但透過測試可幫助團隊決定最終要用哪個方案,那些被放棄的假設/解法不見得一定是不好的點子,只是在那個情況下數據顯示另個結果比較好。
