用 A/B testing 證明內容的價值

將結構化 A/B testing 帶入一間加密貨幣交易所的內容流程——順便證明文案真是推動得到數字。

將結構化 A/B testing 帶入 Bybit 的內容流程，令「文案很重要」由一個意見，變成產品領導層自己見得到的數字。

單一彈窗測試轉換率提升 38%

重寫 landing page 做到 7% 轉換率

內容—產品流程整合的基礎

挑戰

在一間節奏極快的加密貨幣交易所，內容設計很少坐得上張決策枱。文案被當成最後一步——產品和設計拍完板之後先輪到。商業需求就是要有辦法證明：文案上的決定，是量度得到的。

當數字不妥的時候，領導層很少會第一時間望向內容；沒有證據，這個假設就一直郁不到。對用戶那哪的風險亦都很實在。沒有人測試過的文案，正正就放在「一句字決定它轉換定走人」那些時刻——無論是彈窗定 landing page。內容變成一種交易式、靜態的工序，對體驗質素幾乎沒有影響力。

要解決的問題：起一套測試流程，令文案的商業影響證明得到，而且重複做得到。

產品經理需要些甚麼？

要解決個問題，我首先要知道產品的需求。動手做之前，我花了很多時間和持份者溝通清楚：我們究竟在推甚麼，以及內容實際上解決得到哪些痛點。

現況和最佳做法差幾遠

我亦花時間研究溝通和專案管理上的最佳做法，用來磨出我們的假設：文案清楚些，就會帶到信任和轉換。

我們的 OKR 是甚麼？

管理層對我們有期望，可能是轉換，可能是存款。要證明影響力，構思就要一直對準這些商業需求。

引入結構化 A/B testing

由 App 內營銷彈窗開始——賭注高，而且結果追蹤得到。第一個測試將一個極簡、以產品為主的版本 A，對住一個更直接、以利益為先的版本 B。版本 B 令彈窗轉換率提升了 38%，而且具統計顯著性。那次是產品經理和管理層第一次是用數字看到文案的影響，而不是聽人講。

之後個框架擴展到 landing page：一次圍住「令人安心」而不是「描述功能」的重寫，令轉換率去到 7%。每個測試都有假設、版本理由和結果的文件紀錄，砌成一個整隊人重用得到的模型。

在本地化裏面搵到訊號

用優化過的英文文案對住各市場專屬版本測試，結果按地區分歧得好明顯——Brazil 對明快、帶緊迫感的語言反應好；印尼就是中性、正式的講法贏。這批數據成為了一套更有結構的多語文案策略的根據，之後亦在 TransPerfect NEXT 2025 的論壇上分享過。