Optimizely Intelligence Cloud: Faʻafefea Ona Faʻaaoga Stats Engine I le A / B Suʻega Tino, Ma Vave

Mautinoa lelei Stats afi ma A / B Suʻega Taʻiala

Afai o loʻo e sailia e faʻatautaia se faʻataʻitaʻiga polokalama e fesoasoani ai i lau pisinisi faʻataʻitaʻiga ma aʻoaʻo, avanoa o loʻo e faʻaaogaina Optimizely Atamai Cloud - pe ua e tilotilo iai. Optimizely o se tasi o sili ona mamana mea faigaluega i le taʻaloga, ae pei o soʻo se mea faigaluega, oe ono faʻaaogaina sese pe afai e te le malamalama pe faʻafefea ona aoga. 

O le a le mea e sili ai le malosi o Optimizely? I le ogatotonu o lana vaega seti o loʻo taoto ai le sili malamalama ma malamalama faʻafuainumera afi afi i le lona tolu-pati meafaigaluega, faʻatagaina oe e taulai sili atu i le mauaina taua taua faʻataʻitaʻiga - e aunoa ma le tau popole o loʻo e faʻauiga sese au iʻuga. 

E pei lava o se aʻoaʻoga tauaso faʻaleaganuʻu i vailaʻau, A / suʻega B o le a faʻaalia faʻasolosolo ese togafitiga o lau '' upega tafaʻilagi i tagata faʻaaoga eseese e faʻatusatusa ai le aoga o togafitiga taʻitasi. 

O fuainumera fesoasoani ia matou faia faʻamatalaga e uiga i le aoga o na togafitiga i se taimi umi. 

Tele A / B suʻesuʻe mea faigaluega faʻalagolago i se tasi o lua ituaiga o fuainumera inferensi: Frequentist poʻo Bayesian fuainumera. E tofu aoga ma eseesega lelei ma leaga - O fuainumera masani e manaʻomia le tele o faʻataʻitaʻiga e muamua faʻataʻitaʻia le faʻataʻitaʻiga, ma Bayesian fuainumera tele popolega e uiga i le faia lelei faʻaiuga filifiliga nai lo le faʻamaoniaina soʻo se tasi fuainumera mo aʻafiaga, ia faʻaigoaina ni faʻataʻitaʻiga se lua. Optimizely's superpower o le pau lea o le mea faigaluega i luga o le maketi i aso nei e ave a sili ona lelei o lalolagi uma auala.

O le iʻuga o le iʻuga? Optimizely mafai ai e tagata faʻaoga ona tamoʻe faʻataʻitaʻia vave, sili atu faʻatuatuaina, ma sili atu intuitively.

Ae ina ia mafai ona faʻaaoga atoatoa lena mea, e ui i lea, e taua le malamalama i le mea o loʻo tupu i tua atu o vaaiga. Nei o 5 malamalamaʻaga ma taʻiala o le a mafai ai ona e faʻaaogaina le Optimizely agavaʻa pei o se pro.

Fuafuaga # 1: Malamalama e le o metotia uma e faia tutusa

I le tele o meafaigaluega suʻesuʻe, o se mataupu e masani ona le amanaʻiaina o le tele o metric e te faʻaopopoina ma siakiina o se vaega o lau suʻega, o le tele foi lena o le a e vaʻaia ni faʻaiuga le saʻo ona o se avanoa avanoa (i faʻafuainumera, ua taʻua lenei o le "tele suʻega faʻafitauli "). Ina ia mafai ona faʻamautinoa ana taunuʻuga talitonuina, Optimizely faʻaaoga se faʻasologa o faʻatonutonuina ma faʻasaʻoga e taofia ai le faigata o na tupu i le maualalo mafai. 

O na faʻatonutonu ma faʻasaʻoga e lua ona aʻafiaga pe a e alu e seti suʻega i le Optimizely. Muamua, o le metric oe tofiaina o lau Metric Peraimeri o le a vave taunuʻu faʻafuainumera taua, isi mea uma faifai pea. Lona lua, o le tele o metric oe faʻaopopo i se faʻataʻitaʻiga, o le umi o lau mulimuli metric o le a avea e 'ausia ai fuainumera taua.

Pe a fuafuaina se faataʻitaʻiga, ia mautinoa ia e iloa le metric o le a avea ma ou Moni Moni i lau faiga o filifiliga, fai lau Metric Peraimeri. Ma, tausi le vaega o totoe o lau metotia lisi paʻeʻe e ala i le aveʻesea o se mea e sili atu tele pe faʻapitoa.

Fuafuaga # 2: Fausia Lau oe Lelei Uiga Masani

Optimizely e sili i le tuʻuina atu ia te oe o ni auala mananaia ma fesoasoani e vavaeʻese ai au faʻataʻitaʻiga taunuʻuga. Mo se faʻataʻitaʻiga, e mafai ona e suʻesuʻeina pe o ni togafitiga e sili atu lona lelei i luga o le desktop vs. feaveaʻi, pe matauina eseesega i auala o auala. A o matua lau polokalame faʻataʻitaʻi, e vave ona e manaʻomia ni vaega fou - atonu e faʻapitoa i lau mataupu faʻaaoga, pei o vaega mo le tasi taimi vs. faʻatauga o le lesitala, poʻo le lautele e pei o le "fou vs. toe foʻi mai tagata asiasi" (lea, Faʻamaoni, matou te le mafai ona iloa le mafuaʻaga e le o saunia ai mai le pusa).

O le tala lelei e ala i le Optimizely's Project Javascript fanua, inisinia masani ma Optimizely mafai ona fausiaina soʻo se numera o manaia uiga faʻapitoa e mafai ai ona tofia tagata asiasi ma vaeluaina e. I le Cro Metrics, na matou fausiaina ni numera o oloa (pei o le "tagata fou ma tagata ua toe foʻi mai.") O le faʻaaogaina o lenei agavaʻa o se eseʻesega taua lea i le va o 'au matutua o loʻo iai a latou tekonolosi talafeagai e fesoasoani ai ia latou e faʻatino, ma' au e tauivi ia iloa le atoa gafatia o faʻataʻitaʻiga.

Fuafuaga # 3: Sailiili i le Optimizely's Stats Accelerator

O le tasi mea e masani ona soʻona faʻataʻitaʻi o mea faigaluega suʻesuʻe o le mafai lea ona faʻaaoga le "multi-arm bandits", o se ituaiga o masini e aʻoaʻo ai algorithm e suia tele ai le mea e faʻasoa ai lau feʻaveaʻiga i le taimi o se suʻega, e lafo ai le tele o tagata asiasi i le "manumalo" fesuiaʻiga pe a mafai. O le faʻafitauli ma le tele o faʻaauupegaina o lo o latou iʻuga e le faʻatuatuaina faʻailoaina o umi-gaioiga, o lea la o le faʻaaogaina mataupu mo nei ituaiga o faʻataʻitaʻiga e gata i taimi-maaleale mataupu pei o faʻatauga faʻalauiloaina.

E ui lava i lea, e iai le eseʻesega o le bandit algorithm e avanoa mo tagata faʻaaoga maualuga fuafuaga - Stats Accelerator (lea ua lauiloa o le "Accelerate Learnings" filifiliga i totonu o Bandits). I lenei faʻatulagaina, nai lo le taumafai e faʻavasega tuʻusaʻo auala i le maualuga-faia fesuiaʻiga, Optimizely dynamically vaevaeina feʻaveaʻiga i fesuiaʻiga e ono oʻo atu i faʻafuainumera taua vave. Lenei auala, oe mafai ona aʻoaʻo faʻavavevave, ma taofia le replicability o masani A / B suʻega iʻuga.

Fuafuaga # 4: Faʻaopopo Emojis i Au Metric Igoa

I le tepa muamua lava, o lenei manatu atonu e foliga mai e le fetaui, e oʻo lava i le le atoatoa. Peitaʻi, o se itu taua o le mautinoa o loʻo e faitauina saʻo faʻataʻitaʻiga taunuʻuga amata ile mautinoa oe mafai ona malamalama lau aofia i le fesili. 

O nisi taimi e ui lava i a tatou taumafaiga silisili, e mafai ona fenumiai igoa o metric (faatali - e mu lena metric pe a talia le faʻatonuga, pe a pa le tagata faʻaoga le itulau faʻafetai?) itulau taitai atu i le aofaʻi tele mafaufau mamafa.

Faʻaopopo emojis i au metotia igoa (taulaʻiga, lanumeamata siaki, e oʻo foʻi i le tele tupe taga ono aoga) e mafai ona faʻaiʻuina i itulau e sili atu scannable. 

Talitonu ia matou - o le faitauina o faʻaiuga o le a sili atu ona faigofie.

Fuafuaga # 5: Toe mafaufau i lau Fuainumera Taua Taua

Iuga e faʻapea e mautinoa i le faʻatulagaina o se Optimizely faʻataʻitaʻiga pe a latou oʻo atu taua faʻafuainumera. Taua faʻafuainumera o se faigata numera numera, ae o le mea moni o le avanoa o au matauga o le iʻuga o se moni eseʻesega i le va o lua faitau aofai, ae le naʻo soʻoga faʻafuaseʻi. 

Ua lipotia le tulaga taua o fuainumera fuainumera Optimizely e "aoga i taimi uma" faafetai i le matematika manatu valaauina suʻega faʻasolo - O lenei mea na mafua ai ona sili atu ona faʻatuatuaina i latou nai lo isi meafaigaluega suʻesuʻe, lea e faigofie ona maua i soʻo se ituaiga o "tilotilo" mataupu pe a fai e te vave faitauina.

E aoga le mafaufau pe o le a le maualuga o fuainumera taua e te manatu taua i lau suʻega polokalama. E ui o le 95% o le tauaofiaga i le aʻai faasaienitisi, o loʻo matou suʻesuʻeina suiga o le 'upega tafaʻilagi, ae le o tui. Le isi filifiliga masani i le lalolagi faʻataʻitaʻi: 90%. Ae o e naunau e talia se sili atu le mautonu ina ia mafai ona tamoʻe faʻataʻitaʻiga vave ma tofotofoina nisi aitia? Faʻamata e te faʻaaogaina le 85% poʻo le 80% faʻafuainumera taua? O le faʻamoemoe e uiga i lou tulaga lamatia-taui paleni mafai ona totogiina exponential dividends i le aluga o taimi, o lea ia mafaufau loloto i lenei.

Faitau atili e uiga i le Optimizely Intelligence Cloud

Nei vave lima mataupu faʻavae ma malamalamaʻaga o le a sili ona aoga e manatuaina ao faʻaaoga Optimizely. Pei o soʻo se mea faigaluega, e faʻapunaina i lalo e mautinoa ai ua ia te oe se malamalama lelei o uma i tua-o-vaaiga faʻapitoa, o lea e mafai ai ona e mautinoa o loʻo e faʻaaogaina le mea faigaluega lelei ma lelei. Faatasi ai ma nei malamalamaaga, oe mafai ona maua le faʻamaoni taunuʻuga o loʻo e sailia, pe a e manaʻomia i latou. 

O le'a sou manatu?

O lenei 'upega tafaʻilagi e faʻaaogaina le Akismet e faʻaitiitia le spam. Aoao pe faapefea ona faʻasoa lau faʻamatalaga faʻamatalaga.