1.在多變量測(cè)試時(shí)不要瘋狂追逐測(cè)試變種的數(shù)量
建立MVT時(shí)，不要試圖在每個(gè)頁(yè)面上測(cè)試太多元素和變種。測(cè)試5個(gè)以上的不同頁(yè)面元素，每個(gè)元素有超過(guò)3個(gè)變種，得到明顯的測(cè)試結(jié)果就需要很長(zhǎng)的時(shí)間。這是因?yàn)楣ぞ咝枰诿總€(gè)組合上得到足夠的流量，才能宣布明顯的優(yōu)勝者，如果你測(cè)試的頁(yè)面流量很低這樣的測(cè)試可能要花上好幾個(gè)月。
測(cè)試大量的測(cè)試變種不僅需要更長(zhǎng)的時(shí)間才能得到顯著的結(jié)果，而且創(chuàng)建許多不同的測(cè)試版本也需要更長(zhǎng)的時(shí)間(特別是在你需要大量幫助才能創(chuàng)建這些版本的情況下)。這可能嚴(yán)重降低每個(gè)月測(cè)試的數(shù)量，減慢優(yōu)化策略的進(jìn)展。
為了避免一次測(cè)試過(guò)多頁(yè)面元素的問(wèn)題，理想的情況下你應(yīng)該嘗試將測(cè)試限制在7元素以內(nèi)，每個(gè)元素只有兩個(gè)變種。
如果你想要測(cè)試7個(gè)以上元素，建議你用創(chuàng)新A/B測(cè)試代替，在這種測(cè)試中你創(chuàng)建個(gè)完全不同的頁(yè)面，與當(dāng)前頁(yè)面進(jìn)行對(duì)比次測(cè)試。獲得一個(gè)明顯的測(cè)試優(yōu)勝者所花的時(shí)間相對(duì)來(lái)說(shuō)要少得多，然后你可以在優(yōu)勝頁(yè)面版本的元素上進(jìn)一步開(kāi)展后續(xù)的測(cè)試。
2.確保測(cè)試挑戰(zhàn)者有足夠的差異
挑戰(zhàn)者版本與控制版本過(guò)于相近，以至于訪問(wèn)者幾乎注意不到差別(更不用說(shuō)影響轉(zhuǎn)化率了)，這是測(cè)試表現(xiàn)不佳的較常見(jiàn)原因之一。當(dāng)你測(cè)試設(shè)計(jì)人員控制創(chuàng)建的圖形元素如橫幅或者圖片)時(shí)，特別容易出現(xiàn)此類問(wèn)題。為了緩解這些問(wèn)題，你應(yīng)該與設(shè)計(jì)團(tuán)隊(duì)會(huì)談，確保他們知道測(cè)試的動(dòng)機(jī)和方向，給他們舉一些顯著不同版本的例子 。
理想情況下，你需要?jiǎng)?chuàng)建一個(gè)有顯著不同的挑戰(zhàn)者版本。例如，不要只是稍微改變個(gè)按鈕的顏色；你應(yīng)該進(jìn)行更醒目、更明顯的修改，例如使用差別很大的圖片或者用詞然而，如果不進(jìn)行迭代測(cè)試找出對(duì)轉(zhuǎn)化影響最大的元素，那么不建議一次修改多個(gè)元素如果你的挑戰(zhàn)者版本需要不同的文本(例如，新的標(biāo)題或者行動(dòng)號(hào)召)，你應(yīng)該讓營(yíng)銷團(tuán)隊(duì)幫助你創(chuàng)建變種，以增加它更好地影響訪問(wèn)者的概率。理想狀況下，你應(yīng)該讓一位營(yíng)銷負(fù)責(zé)人專門(mén)負(fù)責(zé)這項(xiàng)任務(wù)，他將成為優(yōu)化團(tuán)隊(duì)的一員。
3.不要花太多時(shí)間完善測(cè)試挑戰(zhàn)者版本
測(cè)試缺乏效率的一個(gè)常見(jiàn)原因是將太多時(shí)間花在設(shè)計(jì)一個(gè)完善的測(cè)試變種上。你不應(yīng)該在完善它們上花費(fèi)太多時(shí)間，因?yàn)榇蟛糠职姹咀詈鬅o(wú)法獲得優(yōu)勝而留在網(wǎng)站上，相反，你只需要投資足夠的時(shí)間表達(dá)變種的主要思想即可一一花費(fèi)常規(guī)設(shè)計(jì)時(shí)間的80%，不要最困難、最費(fèi)時(shí)的20%花在它們的完善上。
需要記住的關(guān)鍵點(diǎn)是，如果有必要，你總是可以對(duì)優(yōu)勝版本進(jìn)行調(diào)整，例如精確地符合品牌要求(只要你不對(duì)優(yōu)勝版本進(jìn)行重大修改，就不會(huì)使測(cè)試的結(jié)果失效)。
你應(yīng)該明確地向設(shè)計(jì)部門(mén)強(qiáng)調(diào)這一點(diǎn)，并確保他們不會(huì)將太多的時(shí)間花在絕對(duì)地完善每個(gè)測(cè)試設(shè)計(jì)上。這樣做就意味著運(yùn)行測(cè)試所需要的可見(jiàn)資源較少，最終意味著你能更經(jīng)常和更有效地運(yùn)行測(cè)試。
4.及早規(guī)劃測(cè)試資源
在你創(chuàng)建測(cè)試時(shí)，往往需要來(lái)自許多不同部門(mén)的幫助，包括IT部門(mén)(幫助測(cè)試的實(shí)施)、設(shè)計(jì)部門(mén)(幫助設(shè)計(jì)測(cè)試變種)以及營(yíng)銷部門(mén)(幫助提出與營(yíng)銷相關(guān)的改進(jìn)，如行動(dòng)號(hào)召或者標(biāo)題)。
如果沒(méi)有及早計(jì)劃獲得這類幫助和資源，就會(huì)導(dǎo)致你的測(cè)試創(chuàng)建很慢且效率低下，最終降低測(cè)試的頻率(為了擁有一個(gè)長(zhǎng)期有效的測(cè)試計(jì)劃，你必須能夠同時(shí)測(cè)試許多內(nèi)容)。這種現(xiàn)象常常出現(xiàn)的原因是最后時(shí)刻的測(cè)試資源規(guī)劃可能有被其他部門(mén)延遲的危險(xiǎn)。最后時(shí)刻通常有許多有關(guān)測(cè)試的問(wèn)題需要回答，這也會(huì)推遲啟動(dòng)的時(shí)間。
因此，你必須盡可能提前規(guī)劃需要的資源并排定優(yōu)先順序，并且與項(xiàng)目經(jīng)理緊密協(xié)作提高成功的可能性 。
5.在測(cè)試期間對(duì)流量主要來(lái)源的更改保持謹(jǐn)慎
另一個(gè)需要注意的事實(shí)是，在運(yùn)行測(cè)試期間，流量來(lái)源模式的影響可能變化。前前面已經(jīng)提到過(guò)，轉(zhuǎn)化率在不同流量源中可能有很大的不同，因此可能嚴(yán)重地影響你的測(cè)試結(jié)果例如，如果你在網(wǎng)站上進(jìn)行測(cè)試并且發(fā)起一個(gè)大型新聞郵件活動(dòng)，這可能在幾天內(nèi)提高了你的轉(zhuǎn)化率，你的測(cè)試在短期內(nèi)看上去比實(shí)際的表現(xiàn)要好。這是因?yàn)樾侣勦]件流流量的來(lái)源質(zhì)量較高，所以轉(zhuǎn)化率往往更高。
另一個(gè)例子是，如果你的營(yíng)銷部門(mén)在測(cè)試中期開(kāi)始一場(chǎng)付費(fèi)搜索活動(dòng)，這類的流量也更有針對(duì)性，有更大的轉(zhuǎn)化可能，也會(huì)影響你的結(jié)果。
大部分較為高級(jí)的測(cè)試工具實(shí)際上都可以過(guò)濾分組或者流量，避免這類情形。因此在你啟動(dòng)測(cè)試之前，應(yīng)該詢問(wèn)營(yíng)銷團(tuán)隊(duì)他們?cè)跍y(cè)試期間是否計(jì)劃舉行可能改變網(wǎng)站流量質(zhì)量(從而影響你的測(cè)試結(jié)果)的重大流量驅(qū)動(dòng)活動(dòng)，然后建立過(guò)濾器，在測(cè)試期間刪除這些分組。
6.不要在開(kāi)始時(shí)刪除表現(xiàn)不住的測(cè)試版本
進(jìn)行測(cè)試的人們常常受到誘惑，刪除和排除似乎表現(xiàn)不佳的測(cè)試版本，特別是在他們或者其他人已經(jīng)相信這些性性能不佳的版本不如其他測(cè)試版本好的情況下
這是很不好的，因?yàn)橛袝r(shí)候網(wǎng)站設(shè)計(jì) 開(kāi)始時(shí)表現(xiàn)不佳的測(cè)試版本可能隨著時(shí)間的推移而變得更好，甚至最后得測(cè)試的勝利。因此，你應(yīng)該保留所有測(cè)試變種.直到測(cè)試結(jié)束 。
本文地址：http://www.khwajamoinuddinchishty.com//article/2651.html
