使用假設(shè)檢驗(yàn)時，我們使用四個主要步驟：
- 首先，我們提出一個假設(shè)。
- 然后，我們收集關(guān)于該假設(shè)的數(shù)據(jù) 。
- 我們分析數(shù)據(jù)，然后...
- 最后 ，我們得出一些結(jié)論 。
A / B測試最重要的部分是有很強(qiáng)的假設(shè)。 因此，在這里，我已經(jīng)討論了如何制定強(qiáng)有力的seo假設(shè)。
1.形成假設(shè)
幫助提出假設(shè)的三種機(jī)制
現(xiàn)在我們需要記住，使用SEO，我們試圖影響三件事以增加自然流量。
- 我們要么試圖提高自然點(diǎn)擊率。 因此，您所做的任何更改都會使您在SERP中的出現(xiàn)對您的競爭對手更具吸引力，因此會有更多人點(diǎn)擊您的廣告。
- 或者，您可以提高自然排名，從而使自己更高。
- 或者，我們也可以為更多關(guān)鍵字排名。
您也可能會同時影響所有這三個方面。 但是，您只想確保其中之一明確成為目標(biāo)，否則就不是真正的SEO測試。
2.收集數(shù)據(jù)
接下來，我們收集數(shù)據(jù)。使用ODN平臺，我們進(jìn)行了A / B測試，并將頁面分為統(tǒng)計(jì)上相似的存儲桶。
使用控件和變體進(jìn)行A / B測試
因此，一旦執(zhí)行了此操作，我們將使用變量組，然后使用數(shù)學(xué)分析來確定如果不進(jìn)行更改，我們認(rèn)為變量組會做什么。
所以在這里，我們有黑線，那就是這樣做的地方。 它可以預(yù)測如果我們不做任何更改，模型會認(rèn)為變體小組會做什么。 這條虛線是測試開始的時間。 這樣您可以在測試后看到分離。 藍(lán)線實(shí)際上就是發(fā)生的情況。
現(xiàn)在，由于這兩行之間存在差異，因此我們可以看到一個變化。 如果我們移到這里，我們就繪制了這兩條線之間的差。
由于藍(lán)線高于黑線，因此我們將其稱為正面測試。 現(xiàn)在，這里的綠色部分是我們的置信區(qū)間，作為標(biāo)準(zhǔn)，這部分是95％的置信區(qū)間。 現(xiàn)在我們使用它，因?yàn)槲覀兪褂媒y(tǒng)計(jì)測試。 因此，當(dāng)綠線全部位于零線上方，或者所有綠線都位于零線以下（用于陰性測試）時，我們可以將其稱為統(tǒng)計(jì)顯著性測試。
對于這個，我們最好的估計(jì)是，這將使會議增加12％，大約每月大約有7,000次自然會議。 現(xiàn)在，在這里的任何一側(cè)，您都可以看到我寫了2.5％。 那就是使所有這些加起來等于100，其原因是您永遠(yuǎn)不會獲得100％的自信結(jié)果。 總是有機(jī)會，有隨機(jī)的機(jī)會，而您有錯誤的否定或肯定的判斷。 這就是為什么我們?nèi)缓笳f我們有97.5％的信心這是積極的。 那是因?yàn)槲覀冇?5加2.5。
沒有統(tǒng)計(jì)意義的測試
現(xiàn)在，我們發(fā)現(xiàn)在很多情況下我們進(jìn)行的測試在統(tǒng)計(jì)上并不重要，但是有很強(qiáng)的證據(jù)表明它們有所提高。 如果我們移到這里，我有一個例子。 因此，這是一個沒有統(tǒng)計(jì)學(xué)意義的示例，但我們看到了強(qiáng)勁的增長。
現(xiàn)在您可以看到我們的綠線中仍然有一個負(fù)值區(qū)域，也就是說，在95％的置信區(qū)間內(nèi)，這仍然是一個負(fù)測試。 現(xiàn)在，如果我們再次在下面放下，我又做了粉紅色。 因此，我們雙方都有5％的權(quán)益，我們可以在這里說我們有95％的信心取得了積極的結(jié)果。 這是因?yàn)樵?％始終也高于該值。
3.分析數(shù)據(jù)以檢驗(yàn)假設(shè)
現(xiàn)在，我們這樣做的原因是嘗試并能夠?qū)嵤┪覀冇泻軓?qiáng)假設(shè)的變更，并且能夠從中獲得勝利，而不僅僅是完全拒絕。 現(xiàn)在造成這種情況的部分原因還在于我們說我們在做生意而不是科學(xué)。
在這里，我創(chuàng)建了一個圖表，該圖表說明了何時可以部署統(tǒng)計(jì)意義上不重要的測試，這是基于假設(shè)的強(qiáng)弱程度以及更改的便宜程度或昂貴程度。
強(qiáng)有力的假設(shè)/廉價的改變
現(xiàn)在在這里，在您的右上角，當(dāng)我們有很強(qiáng)的假設(shè)和廉價的更改時，我們可能會部署它。 例如，我們最近與Distilled的一位客戶進(jìn)行了這樣的測試，他們將主關(guān)鍵字添加到H1中。
最終結(jié)果看起來像此圖。 這是一個強(qiáng)有力的假設(shè)。 實(shí)施起來并不是一項(xiàng)昂貴的更改，我們決定部署該測試，因?yàn)槲覀兎浅Ｓ行判哪菍⑷匀皇欠e極的。
虛假假設(shè)/廉價變動
現(xiàn)在，從另一方面來說，如果您的假設(shè)很弱，但價格仍然便宜，那么也許有證據(jù)表明仍是采用該假設(shè)的理由。 您必須與客戶溝通。
強(qiáng)有力的假設(shè)/昂貴的改變
在具有強(qiáng)大假設(shè)點(diǎn)的昂貴變更中，如果您根據(jù)要達(dá)到的百分比變化來計(jì)算預(yù)期收入，則必須權(quán)衡從投資回報(bào)中獲得的收益。
虛假假設(shè)/廉價變動
如果假設(shè)不充分且變化巨大，那么我們僅在統(tǒng)計(jì)意義重大的情況下才需要部署它。
4.得出結(jié)論
現(xiàn)在我們需要記住，當(dāng)我們進(jìn)行假設(shè)檢驗(yàn)時，我們所做的只是嘗試檢驗(yàn)原假設(shè)。 這并不意味著無效結(jié)果意味著根本沒有效果。 這意味著我們不能接受或拒絕該假設(shè)。 我們說的是，這太隨機(jī)了，以至于我們不能說這是真的。
現(xiàn)在，95％的置信區(qū)間能夠接受或拒絕該假設(shè)，我們說的是數(shù)據(jù)不是噪音。 當(dāng)它的置信度小于95％時，就像我們在這里所說的那樣，我們不能說我們通過科學(xué)測試就能學(xué)到一些東西，但是我們?nèi)匀豢梢哉f，我們有很充分的證據(jù)表明這將產(chǎn)生積極的影響。在這些頁面上的效果。
測試的優(yōu)點(diǎn)
現(xiàn)在，當(dāng)我們與客戶討論此問題時，這是因?yàn)槲覀冋嬲哪繕?biāo)是在這里提供與其他行業(yè)內(nèi)其他人的競爭優(yōu)勢。 現(xiàn)在，測試的主要優(yōu)勢是避免那些負(fù)面變化。
我們只想確保所做的更改不會使流量真正下降，而且我們看到了很多。 我們稱之為躲閃的子彈。
現(xiàn)在，這是我希望您能從事的工作，并能夠與您的客戶或您自己的網(wǎng)站一起使用。 希望您可以開始提出假設(shè)，即使您無法部署ODN之類的東西，如果您所做的更改正在幫助或損害流量，您仍然可以使用GA數(shù)據(jù)來嘗試并獲得更好的主意。
（文 Emily.Potter）
