Awọsanma oye ti o dara julọ: Bii o ṣe le Lo Ẹrọ Awọn iṣiro si A/B Idanwo Ọlọgbọn, Ati Yiyara

Ẹrọ Iṣiro Optimizely ati Awọn ọgbọn Idanwo A/B

Ti o ba n wa lati ṣiṣẹ eto idanwo lati ṣe iranlọwọ idanwo iṣowo rẹ & kọ ẹkọ, awọn aye ni o nlo Optimizely oye awọsanma - tabi o ti wo o kere ju. Ti o dara julọ jẹ ọkan ninu awọn irinṣẹ ti o lagbara julọ ninu ere, ṣugbọn bii eyikeyi iru irinṣẹ, o le lo ni aṣiṣe ti o ko ba loye bi o ṣe n ṣiṣẹ. 

Kini o jẹ ki Optimizely lagbara pupọ? Ni ipilẹ ti ẹya-ara ẹya rẹ ni imọ-ẹrọ ti o ni imọran pupọ julọ ati ogbon inu ninu ohun elo ẹnikẹta, gbigba ọ laaye lati dojukọ diẹ sii lori gbigba awọn idanwo pataki laaye-laisi nilo lati ṣe aibalẹ pe o tumọ awọn abajade rẹ. 

Pupọ bii ikẹkọ afọju ibile ni oogun, A / B igbeyewo yoo fihan laileto yatọ itọju ti aaye rẹ si awọn olumulo oriṣiriṣi lati lẹhinna ṣe afiwe ipa ṣiṣe itọju kọọkan. 

Awọn iṣiro lẹhinna ṣe iranlọwọ fun wa lati ṣe awọn iyalẹnu nipa bi itọju yẹn ṣe munadoko lori igba pipẹ. 

Pupọ awọn irinṣẹ idanwo A/B gbarale ọkan ninu awọn oriṣi meji ti ifisi iṣiro: Loorekoore tabi awọn iṣiro Bayesian. Ile -iwe kọọkan ni ọpọlọpọ awọn aleebu ati awọn alailanfani - Awọn iṣiro loorekoore nilo iwọn ayẹwo lati wa ni titan ni ilosiwaju ṣiṣe adaṣe kan, ati awọn iṣiro Bayesian ni pataki bikita nipa ṣiṣe awọn ipinnu itọsọna to dara dipo sisọ eyikeyi nọmba kan fun ipa, lati lorukọ awọn apẹẹrẹ meji. Agbara nla ti Optimizely ni pe o jẹ ọpa nikan lori ọja loni lati mu ti o dara julọ ti awọn agbaye mejeeji ọna.

Ipari ipari? Optimizely n fun awọn olumulo laaye lati ṣiṣẹ awọn adanwo yiyara, igbẹkẹle diẹ sii, ati diẹ sii inu inu.

Lati le lo anfani kikun yẹn, botilẹjẹpe, o ṣe pataki lati ni oye ohun ti n ṣẹlẹ lẹhin awọn iṣẹlẹ. Eyi ni awọn oye ati awọn ọgbọn 5 ti yoo gba ọ ni lilo awọn agbara Optimizely bii pro.

Ilana #1: Loye pe Kii ṣe gbogbo Awọn metiriki ni a ṣẹda ni dọgbadọgba

Ninu ọpọlọpọ awọn irinṣẹ idanwo, ọrọ igbagbe nigbagbogbo ni pe awọn metiriki diẹ sii ti o ṣafikun ati tọpinpin gẹgẹ bi apakan ti idanwo rẹ, o ṣee ṣe diẹ sii lati rii diẹ ninu awọn ipinnu ti ko tọ nitori aye laileto (ninu awọn iṣiro, eyi ni a pe ni “iṣoro idanwo ọpọ ”). Lati le jẹ ki awọn abajade rẹ jẹ igbẹkẹle, Optimizely nlo lẹsẹsẹ awọn idari ati awọn atunṣe lati jẹ ki awọn aidọgba ti iyẹn jẹ kekere bi o ti ṣee. 

Awọn iṣakoso ati awọn atunṣe yẹn ni awọn ilolu meji nigbati o lọ lati ṣeto awọn idanwo ni Iṣapeye. Ni akọkọ, iwọn ti o yan bi tirẹ Metric Akọkọ yoo de ọdọ pataki iṣiro ni iyara, gbogbo awọn nkan miiran nigbagbogbo. Keji, awọn metiriki diẹ sii ti o ṣafikun si idanwo kan, gigun awọn metiriki rẹ nigbamii yoo gba lati de ọdọ pataki iṣiro.

Nigbati o ba gbero idanwo kan, rii daju pe o mọ eyi ti metiriki yoo jẹ Ariwa Otitọ rẹ ninu ilana ṣiṣe ipinnu rẹ, ṣe pe Metric Primary rẹ. Lẹhinna, tọju atokọ atokọ awọn metiriki rẹ si apakan nipa yiyọ ohunkohun ti o pọ ju tabi tangential.

Ilana #2: Kọ Awọn abuda Aṣa tirẹ

Optimizely jẹ nla ni fifun ọ ni ọpọlọpọ awọn ọna ti o nifẹ ati iranlọwọ lati pin awọn abajade idanwo rẹ. Fun apẹẹrẹ, o le ṣayẹwo boya awọn itọju kan ṣe dara julọ lori tabili la alagbeka, tabi ṣe akiyesi awọn iyatọ kọja awọn orisun ijabọ. Bi eto idanwo rẹ ti ndagba botilẹjẹpe, iwọ yoo yarayara fẹ fun awọn apakan tuntun-iwọnyi le jẹ pato si ọran lilo rẹ, bii awọn apakan fun akoko kan la. Awọn rira ṣiṣe alabapin, tabi bi gbogbogbo bi “tuntun la. ni otitọ, a ko tun le roye idi ti a ko pese jade kuro ninu apoti).

Awọn iroyin ti o dara ni pe nipasẹ aaye Iṣapeye Javascript ti Optimizely, awọn onimọ -ẹrọ ti o faramọ Optimizely le kọ nọmba eyikeyi ti awọn abuda aṣa ti o nifẹ si ti o le fi awọn alejo si ati apakan nipasẹ. Ni Awọn wiwọn Cro, a ti kọ nọmba kan ti awọn modulu iṣura (bii “tuntun la awọn alejo ti n pada”) ti a fi sii fun gbogbo awọn alabara wa nipasẹ Javascript Project wọn. Lilo agbara yii jẹ iyatọ pataki laarin awọn ẹgbẹ ti o dagba ti o ni awọn orisun imọ -ẹrọ to tọ lati ṣe iranlọwọ fun wọn lati ṣiṣẹ, ati awọn ẹgbẹ ti o tiraka lati mọ agbara kikun ti idanwo.

Ilana #3: Ye Optimizely's Stats Accelerator

Ẹya ohun elo idanwo igbagbogbo-overhyped ni agbara lati lo “awọn onijagidijagan olona-pupọ”, iru ẹrọ ikẹkọ algorithm kan ti o yipada ni iṣipopada nibiti o ti pin ijabọ rẹ ni akoko idanwo, lati firanṣẹ bi ọpọlọpọ awọn alejo si “bori” iyatọ bi o ti ṣee. Ọrọ naa pẹlu awọn onijagidijagan ti ọpọlọpọ ni pe awọn abajade wọn kii ṣe awọn itọkasi igbẹkẹle ti iṣẹ igba pipẹ, nitorinaa ọran lilo fun awọn iru awọn adanwo wọnyi ni opin si awọn ọran ifura akoko bi awọn igbega tita.

Ti o dara julọ, botilẹjẹpe, ni oriṣi oriṣiriṣi ti alugoridimu bandit ti o wa fun awọn olumulo lori awọn ero ti o ga julọ - Accelerator Stats (ti a mọ ni bayi bi aṣayan “Ṣiṣe Awọn ẹkọ” ni inu Awọn olè). Ninu iṣeto yii, dipo ki o gbiyanju lati ṣe ipinfunni iṣipopada si iyatọ si iṣẹ ṣiṣe ti o ga julọ, Optimizely dynamically allocates ijabọ si awọn iyatọ ti o ṣeeṣe julọ lati de ọdọ pataki iṣiro ni iyara. Ni ọna yii, o le kọ ẹkọ ni iyara, ati idaduro atunṣe ti awọn abajade idanwo A/B ibile.

Ilana #4: Ṣafikun Emojis si Awọn orukọ Metiriki rẹ

Ni iṣaju akọkọ, imọran yii jasi ohun ti ko si ni aaye, paapaa inane. Bibẹẹkọ, apakan pataki ti ṣiṣe idaniloju pe o ka awọn abajade idanwo ti o tọ bẹrẹ ni ṣiṣe idaniloju pe awọn olugbo rẹ le loye ibeere naa. 

Nigba miiran laibikita awọn akitiyan wa ti o dara julọ, awọn orukọ metiriki le di airoju (duro - ṣe ina metiriki yẹn nigbati a gba aṣẹ naa, tabi nigbati olumulo ba kọ oju -iwe o ṣeun?), Tabi idanwo kan ni ọpọlọpọ awọn metiriki ti yiyi si oke ati isalẹ awọn abajade. oju -iwe yori si apọju oye lapapọ.

Ṣafikun emojis si awọn orukọ metiriki rẹ (awọn ibi -afẹde, awọn ami -ami alawọ ewe, paapaa apo owo nla le ṣiṣẹ) le ja si awọn oju -iwe ti o jẹ ọlọjẹ pupọ diẹ sii. 

Gbekele wa - kika awọn abajade yoo ni irọrun pupọ.

Ilana #5: Tun-wo Ipele pataki Iṣiro Rẹ

Awọn abajade ni a rii pe o jẹ ipari ni o tọ ti idanwo ti o dara julọ nigbati wọn ti de lami iṣiro. Pataki iṣiro jẹ ọrọ mathematiki alakikanju, ṣugbọn ni pataki o jẹ iṣeeṣe pe awọn akiyesi rẹ jẹ abajade ti iyatọ gidi laarin awọn olugbe meji, kii ṣe aye lasan. 

Awọn ipele pataki iṣiro iṣiro ti Optimizely jẹ “nigbagbogbo wulo” ọpẹ si imọran mathematiki ti a pe igbeyewo lesese - eyi n jẹ ki wọn ni igbẹkẹle diẹ sii ju ti awọn irinṣẹ idanwo miiran lọ, eyiti o faramọ si gbogbo awọn ọran ti “yoju” ti o ba ka wọn laipẹ.

O tọ lati gbero kini ipele ti pataki iṣiro ti o ro pe o ṣe pataki si eto idanwo rẹ. Lakoko ti 95% jẹ apejọ ni agbegbe onimọ -jinlẹ, a n ṣe idanwo awọn ayipada oju opo wẹẹbu, kii ṣe awọn ajesara. Aṣayan miiran ti o wọpọ ni agbaye esiperimenta: 90%. Ṣugbọn ṣe o ṣetan lati gba aidaniloju diẹ diẹ lati le ṣiṣẹ awọn adanwo ni iyara ati ṣe idanwo awọn imọran diẹ sii? Ṣe o le lo 85% tabi paapaa 80% pataki iṣiro? Jije imomimọ nipa iwọntunwọnsi ẹsan eewu rẹ le san awọn ipin ti o pọ si lori akoko, nitorinaa ronu eyi ni pẹkipẹki.

Ka diẹ sii Nipa awọsanma oye ti o dara julọ

Awọn ipilẹ iyara marun wọnyi ati awọn oye yoo jẹ iranlọwọ iyalẹnu lati fi si ọkan nigba lilo Optimizely. Gẹgẹbi pẹlu ọpa eyikeyi, o ṣan silẹ lati rii daju pe o ti ni oye ti o dara ti gbogbo awọn isọdi-lẹhin-awọn oju iṣẹlẹ, nitorinaa o le rii daju pe o nlo ọpa daradara ati ni imunadoko. Pẹlu awọn oye wọnyi, o le gba awọn abajade igbẹkẹle ti o n wa, nigbati o nilo wọn. 

Kini o le ro?

Aaye yii nlo Akismet lati dinku apamọ. Mọ bi a ṣe n ṣalaye data rẹ ti o ṣawari.