「你可能忽略的A/B Test盲點??」
A/B Test算是遊戲業很常使用的方式之一。尤其目前Googleplay就內建了A/B test工具,遊戲人員可針對icon、商店頁截圖、文案來做測試對比。
產品與研發人員也很常利用A/B Test將新功能的調整,先釋放給少部分的一群用戶,來看看玩家反應如何。前幾天介紹放置遊戲趨勢的研討會中,其中某家廠商也表示使用大量A/B Test的好處。
然而,這篇來自於【mobiledevmemo】的文章介紹了A/B test的兩大盲點,蠻值得我們反思一下。
●流量來源的變化會影響測試結果。
打個比方,在還沒大量推廣時所做的A/B test,和大量推廣時所做的A/B test,玩家來源是非常不同的。尤其,有些遊戲的線上廣告訴求和五圖不一定相符合。
比方說,我們都知道手遊的廣告創意"無限",廣告內容和遊戲內容往往有一定差異。因此,自然流量玩家,和看了線上廣告到商店頁面的玩家,其對於遊戲的"認知假設"是不一樣的。
看了線上廣告的玩家,可能以為這遊戲是3A級大作。但自然流量的玩家,可能是因為朋友說這遊戲社交結婚好玩而到頁面的。這時,如果前者的廣告量級大,則商店頁面icon以3A級大作概念去打造的轉換率就會比較好。
這也是為什麼,有時我們從點擊轉換較好的線上廣告中,截取其素材作為icon往往會改善轉換率許多。很大的原因是來自於流量本身的改變,而不一定是icon本身夠吸引人的關係。
反之,當此廣告群組碰到素材老化跑不動,而改以其他廣告素材時,icon或商店文案的轉換率,可能就會因此而有所下滑。
●某些功能的測試本身是會互相影響的,尤其是牽扯到FTUE( first-time user experience)的時候。
舉例來說,當遊戲針對新手階段的訴求(功能ㄧ)做出A/B test時(也許是將開頭動畫移除,以加速玩家進程),此時玩家可能就會受到影響。而若再繼續後續的功能二(難度)、功能三(玩法)的A/B Test,則當我們發現玩家留存上升時,到底是1a+2b+3a造成的,還是1b+2b+3b造成的呢?
文中建議的方法是使用Bayesian Bandits 測試,這個我在實務中沒有使用過。查詢資料看起來是更為動態分群的,追蹤優化用戶的測試狀況。
譬如接受1a的玩家,若測試回饋不佳,會慢慢減少其測試數量,並在後續的測試中予以隔離,更好的處理了混雜與用戶成本的問題。(以上若有理解錯誤也請各位大大不吝指教)
●對於付費的潛在影響。
這一點是文中沒提到,但在其延伸Link內容提及的。免費遊戲收入80%來自於20%的玩家。新icon或商店文案所帶來的高轉換率,不一定會等同於好的ROi。
當新玩家的付費產生問題時,除了檢討活動、導入以外,對於icon與商店文案變化的檢視,可能也是工作之一。
是時候,該重新檢視下A/B Test這件事請了。
#No54
#ABtest
#遊戲廣告
#出差回來好累
同時也有1部Youtube影片,追蹤數超過3萬的網紅Brian Cha Motivation,也在其Youtube影片中提到,好多生意老闆都有呢個疑問... 點解有啲產品明明無咩特別, 偏偏可以做到全城熱賣? 點解自己嘅產品咁好、咁特別, 但就係無人問津? 原來係缺少左呢樣嘢.... . . . 如果你想喺 2021 年將你嘅產品賣出 10X 倍以上, 令你嘅客戶爭相向你購買、做到「供不應求」 甚至成為其他同行嘅模仿對象,...
「marketing strategy icon」的推薦目錄:
marketing strategy icon 在 Brian Cha Motivation Youtube 的精選貼文
好多生意老闆都有呢個疑問...
點解有啲產品明明無咩特別,
偏偏可以做到全城熱賣?
點解自己嘅產品咁好、咁特別,
但就係無人問津?
原來係缺少左呢樣嘢....
.
.
.
如果你想喺 2021 年將你嘅產品賣出 10X 倍以上,
令你嘅客戶爭相向你購買、做到「供不應求」
甚至成為其他同行嘅模仿對象,
你非常需要加入「Next Level Mastermind」,
成為我 10 位學生嘅其中一位(冇錯,我只會錄取 10 位)
你將會得到我同我團隊嘅高級私人策略諮詢,
幫你賺取額外 7 位數字嘅收入...
立即報名:https://www.briancha.com/next
*** 收生階段將於 26/1(二)香港時間凌晨 00:00 截止,名額有限、額滿即止
.................
「謝謝你收看這個影片。
請按訂閱分享讚好我們的頻道。
希望你花一點時間留言回應打招呼。
你的留言是我們製作更多影片的原動力。
期待在這個 CHANNEL 再見到大家!
加油!俾心機!」
-Brian Cha Motivation Team
►按下面連結,立即收看我們更多頻道
https://www.youtube.com/channel/UChICwt059NDUyysyCIzOonA
Brian Cha 車志健 是一名具影響力的激勵講師、創業家、銷售專家及亞洲唯一擁有三項不同運動世界紀錄保持者。26000+學員遍佈10+個國家及地區。教導他們怎樣達到人生目標及事業成功。
►Facebook : https://www.facebook.com/BrianChaMotivation
►Instagram : https://www.instagram.com/brian_cha/
►Website : http://www.brianchamotivation.com/
►Linkedin : https://www.linkedin.com/in/brianchamotivation
►Email : support@brianchamotivation.com
全新一季 The Brian Cha Podcast - Daily Motivation 已經推出
Apple Podcast/Spotify/Telegram 每日激勵信息
立刻按連結收聽
►https://www.briancha.com/podcast-links
預約
各位中小企老闆、導師及團隊領袖,
如果你想知道如何透過網絡營銷拓展業務至全世界,
立刻到以下連結預約,
我的專業團隊會與你聯絡!
►https://www.bcmbusinessconsulting.com/new-s5
tag
Business,生意,生意模式,創造,自信,提升自信,行内頂尖,事業,演講家,演講技巧,企業家,夢想,怎樣達成夢想,車志健,成功導師,激勵大師,成功學,網上課程,網上生意,網上培訓,怎樣成功,銷售,銷售課程,Confidence,Career,Motivation,Leadership,successcoach,Numberone,Businesscoach,success,OnlineCourse,OnlineProgram,OnlineBusiness,Marketing,Onlinemarketing,Sales,Coaching,Publicspeaking,自信心,沒自信,Briancha,Brian,時間管理,管理,Management,Secrets,entrepreneur
………………………………………….
如果你需要更多生意策略上的專業建議,
你可以在 7 日內免費預約一個「1- 對 -1」企業諮詢,
與我們的專業導師團隊聯絡。
立即預約: www.briancha.com/vip-application
….
記得睇到最尾有彩蛋
立即按我 ICON 去我嘅 IG Story Swipe Up
或者按以下連結??
https://www.bcmbusinessconsulting.com/new-s5