第五章 執行階段
數據意識框架應用於各式各樣的地方、 包括各種你想要解決的問題或你想要了解的使用者行為及設計設計解決方案的影響。從非常技術性的小東西到比較大而策略性的問題。
你可以問他們一個問題、 提議一個活動，並看看他們當下的反應。 當你們來回對話，你會更了解什麼能夠激勵他們，他們的在想什麼， 以及他們對於你和他們分享有什麼反應。
我們要在不斷發生的互動中，精進對消費者行為的了解。
A/B測試的語言來說的話，每一種「 手法」都是我們會量測與控制組比較的測試項目。 這四個測試項目都有一樣的量測準、 一樣的評斷指標，而且它們背後也都是相同的假設，描述我們相信能激發的行為以及行為會帶來的結果。
你打造的設計可能會影響到你可以或即將收集到的數據。 我們希望你永遠都能意識到設計和數據之間的關係，因為我們時候會忘了它們之間會互相影響。
全面和局部指的是你處理問題/ 機會領域的規模或是手法。 你的設計會改變測試項目中多個變數（ 全面） 或者你會專注在一或兩個元素（ 局部） ？ 探索和評估指的是你在問題/ 機會領或中已經走多遠了。 你還在探索階段，打造試驗來取得設計方向的回饋嗎（例如「 我們是否該繼續鑽研這個功能/ 這個功能到底重不重要） ？ 還是你在評估你的設計，盡可能改變有限的變數來得到最強證據和建立因果關係。
依你在局部- 全面及評估- 探索的光譜上的相對位置、 考慮你該生產什麼樣的設計
在這些情況下做這種全面探索是合理的：
1. 你在發展新的空間, 而你對這個空間沒有過往的專長或經驗。
2.你想要做大的策略轉變、 而這需要將體驗從根本改變來推行
3.你現有的產品/ 體驗已經靜止了很長一段時間、 而你現在可以運用新的科技、 讓你能夠嘗試過去不可能的事情
4.你感到已經達到局部最大值而任何進一步對產品或功能的優化都無法讓表現顯著改進
全面設計的風險很高。在全面設計你會一次調整多個變數。當你改變一個變數，大多數時候會是負面而非正面的影響，而當你一次改動越多變數、 成功的機會就越小。
如果採用探索性的心態、 你和你的團隊就有了做大夢想的執照。 你不需要授限於思考那些你會願意推出的產品概念、 因為你的目標是要從設計學習、 而不是要打造一個「 完成」 的産品。 你的目標是要獲得方向性的回饋、 來了解要往哪邊使力、 以及了解什麼概念不需要投資太多就可以選擇放棄。
如果你是在評估、 那麼你是在量化測量設計是否有預期的影響。你是否有將指標朝希望的方向移動？ 這種測試可以用於發行準備。
局部探索
目標 讓營隊更好玩
問題 我們該為戶外營隊挑選那些活動?例如獨木舟 畫畫等
局部評估
目標 讓營隊更好玩
問題 比其划船隊員更喜歡獨木舟
全面探索
目標 增加營收
問題 我該搬到新的地點嗎?鎖定新的群眾(媽媽而非小孩)?提出新的價值主張像是瑜伽營而非一般的夏令營
全面評估
目標 增加營收
問題 我是否應該繼續經營營隊?這是否為最大化營收的最佳方式?
你現在有一個假設是透過提供新的活動可以增進報名人數。 我們的假設是:
我們預測透過為營隊增加新的活動，會有更多隊員註冊、 因為我們可以觸及到更廣泛的興趣、 並吸引到更多樣的小孩、 提供獨木舟越野、 賞鳥、 畫室繪畫和嘻哈舞蹈。 測試中的「 控制」 則是不提供任何新活動。
A 獨木舟 戶外 水 活躍
B 定向越野 戶外 陸 活躍
C 賞鳥 戶外 陸 輕鬆
D 畫室繪畫 室內 陸 輕鬆
E 嘻哈舞蹈 室內 陸 活躍
如果你只有思考單一試驗、 那你的下一步大概會是把「 獲勝的」 活動、 也就是最多人參與的活動、 在明年提供給你的隊員。
測試結果思索案例
1.如果所有的「 活躍」 測試項目（ A B和E） 那麼你或許可以用另一個試驗來測試各種不同的體力活動。你是否會提供比這次試驗中更費體力的活動呢？
2· 如果你看到「 室內」 活動（ 項目D和E） 有表現得比「 戶外」 好的趨勢、 那麼你可能會想要加入其他的「 室內」 活動、 像是戲劇或藝術與工藝。
3· 如果你發現兩個「 輕鬆」 活動（ 項目C和D） 以及「 戶外」 活動都表現得不錯、 那下次試驗可能就可以提供戶外繪畫。
過早測試太明確的設計問題、 那可能會導致過早限縮你的探索。 我們也談到要將你的試驗視為一連串的活動、 並考量到你獲得的結果來決定接下來要進行什麼測試。
A/ B測試不該拖累你。 常見的錯誤是直到取得結果才開始思考下步是什麼。 但如果你總是在等待結果那麼你進步的節奏自然會受到限制。 如果可以因應各種可能的結果提前安排下一步、 你就可以在等待結果的同時去設計試驗的下一階段。
想想看「 試驗零」
在你急於為新的問題/ 機會領域執行第一個試驗之前、 一個應該問自己的問題是「 在現在計畫的這個試驗之前、 我該進行什麼試驗？ 」
這種「 試驗零」 思考方式的簡單案例、 就是在執行試驗之前將整個功能移除、 看看它是否存在任何價值。舉個案例:skyscanner把首頁上的(最便宜機票)移除掉。 他們發現這對重點指標完全沒有影響、 因此取消了這個功能、 改為鑽研其他功能、 且不用花時間設計和優化「 便宜機票」 相關的體驗
留言列表
