隨機(jī)測試和AB測試在風(fēng)控策略上的應(yīng)用

在風(fēng)控策略中流傳著不同的測試方法，有隨機(jī)測試與AB測試？這兩者有啥區(qū)別？又該如何進(jìn)行具體的測試案例？本文，來講解這個問題。

一：什么是隨機(jī)測試（Ad hoctesting）？

?始于軟件測試：是根據(jù)測試說明書執(zhí)行用例測試的重要補(bǔ)充手段，是保證測試覆蓋完整性的有效方式和過程。隨機(jī)測試主要是對被測軟件的一些重要功能進(jìn)行復(fù)測，也包括測試那些當(dāng)前的測試用例(TestCase)沒有覆蓋到的部分

?風(fēng)控中的隨機(jī)測試主要指對指定或不指定的特定群體（隨機(jī)范圍），通過限制或不限制場景（時間、客群、環(huán)節(jié)等），通過隨機(jī)數(shù)或其他類似的方式對非特定群體進(jìn)行觀測。

什么時候進(jìn)行隨機(jī)測試？

?隨時可以進(jìn)行。策略的觀測及調(diào)整是個動態(tài)且持續(xù)進(jìn)行的過程，應(yīng)根據(jù)進(jìn)件量的多少每天適度一定比例訂單進(jìn)行隨機(jī)測試。

?注意選擇外部環(huán)境或運(yùn)營策略保持相對平穩(wěn)的時候進(jìn)行；

?也可按需在需要時或選擇部分客群進(jìn)行。

二：什么是AB測試？

隨著現(xiàn)代互聯(lián)網(wǎng)的發(fā)展，試驗的門檻不斷降低，A/B測試已經(jīng)被普遍運(yùn)用在各行各業(yè)，就算你沒有做過A/B測試，也很有可能參與過A/B測試

A/B測試就是將一群用戶分組進(jìn)行試驗，然后觀察不同組用戶的數(shù)據(jù)表現(xiàn)。

A/B測試就是通過隨機(jī)抽樣設(shè)置對照組和實驗組，A是對照組，B是實驗組，AB兩組占比由實際場景決定（任意一組的占比一般不能太低，要滿足統(tǒng)計學(xué)意義），加起來是100%；

由于是隨機(jī)抽樣，AB兩組一開始是完全相同的樣本，然后，改變一個變量，使得B相對A來說只有一個變量不同，從而可以將該變量單獨拎出來、觀察它對輸出結(jié)果的影響。

A/B 測試也是一種產(chǎn)品優(yōu)化方法；為同一個優(yōu)化目標(biāo)制定兩個方案，讓同一部分用戶中的一部分用戶命中 A 方案，同時另一部分用戶命中 B 方案，統(tǒng)計并比較不同方案的點擊率、轉(zhuǎn)化率等數(shù)據(jù)指標(biāo)，通過不同方案的數(shù)據(jù)表現(xiàn)，在確定數(shù)據(jù)表現(xiàn)通過假設(shè)檢驗后，決定最終方案的實驗方法。

三：隨機(jī)測試和AB測試有什么不同？

?AB測試是有兩種策略進(jìn)行比較的，有較明確對象，而隨機(jī)測試，顧名思義隨機(jī)，是測試沒有特定的比較對象的。

?也可認(rèn)為隨機(jī)測試為AB測試的一個特例：特定的與非特定進(jìn)行比較；隨機(jī)測試完成后，會根據(jù)測試結(jié)果選擇新的方向?qū)σ延胁呗赃M(jìn)行優(yōu)化，可能會形成新的AB測試