Поједностављено мултиваријантно тестирање и А / Б тестирање: Како тестирати технике оптимизације веб страница

multivariate testing

Увод:

Постоји много веб локација и апликација које често користимо. Иако их користимо, вероватно не обраћамо много пажње на то како је веб локација постала његова тренутна верзија - с друге стране, ако се нешто не чини у реду, вероватно више никада нећемо посетити локацију / апликацију.

Питање је - шта је потребно да би се „то“ исправило?

Шта ћете научити:

како се користи сортирање у јави

• Мултиваријантно тестирање и А / Б тестирање
• Шта је вишеваријантно тестирање?
• Врсте МВТ тестирања:
• Како се врши мултиваријантно тестирање
• Грешке које треба избегавати
• Радити и не радити
• За и против
• А / Б тестирање
• Предности и недостаци А / Б тестова:
• А / Б тестирање вс Мултиваријантно тестирање вс Сплит тестирање
• Мултиваријантно испитивање
• А / Б / Сплит / Алати за вишеструко испитивање
• Препоручено читање

Мултиваријантно тестирање и А / Б тестирање

„То“ је најчешће функционалност - коју имамо солидне КА процесе за тестирање и процену. Али и „оно“ састоји се од дизајна, комбинације елемената, постављања садржаја на страницу, понекад чак и боје, оријентације итд. који играју истакнуту улогу у свеукупно прихватање производа од стране крајњег корисника.

Испитивање које може у великој мери помоћи у овој области је Мултиваријантно тестирање и А / Б тестирање .

У данашњем чланку ћемо разговарати Мултиваријантно (МВТ) тестирање и А / Б тестирање врсте детаљно.

И једно и друго циља се на оптимизацију веб страница и побољшање стопе конверзије (стопе по којој посетиоци постају купци или повратни посетиоци - заузврат, посао) за веб локацију.

Шта је вишеваријантно тестирање?

Почнимо са Пример .

Ако одређена веб локација ради на дизајнирању / редизајнирању / утврђивању ефикасности странице која треба да има слику и одговарајући текст - Након пажљивог разматрања и разматрања ако компанија уђе у ужи избор за следеће две слике и две реченице - могуће комбинације њих бити следећи:

1) Слика 1

2) Слика 2

3) Наслов / реченица 1: „Циљ мора бити нула незгода“

4) Наслов / реченица 2: „Наш ЦИЉ: НЕМА НЕСРЕЋЕ“

Комбинације:

У горњем примеру смо тестирали варијације комбинација поља да бисмо видели које се од њих добро уклапа. Једноставно речено, управо ту постоји вишеваријантно тестирање.

Технички и тачније, доња формула се користи за одређивање бр. могућих комбинација које су потребне за тестирање различитих комбинација, а то је:

(# Варијације на елементу А) Кс (# Варијације на елементу Б) ... .. = (Укупно # варијације)

У горњем примеру постоје 2 варијације за наслов као и 2 варијације за слику.

Према томе, према формули, постоје укупно 4 комбинације варијација које се истовремено тестирају како би се пронашла најбоља комбинација варијација.

• Главни циљ извођења Мултиваријантног тестирања је мерење и утврђивање ефикасности сваке комбинације варијација на коначном систему.
• Након финализације комбинација варијација, започиње тестирање за утврђивање најуспешнијег дизајна када локација прими довољно промета.
• Резултати добијени са сваком комбинацијом варијације упоређују се са осталим да би се утврдило који дизајн је најприкладнији за постизање крајњег циља (у већини случајева то је Продаја ).
• Ове статистике дају јасну слику да ли је одређена промена била корисна или не.
• Такође, може се анализирати позитиван или негативан утицај на интеракцију корисника

Читав овај процес континуираног мултиваријантног тестирања, побољшање дизајна на основу добијених резултата и постизање пословних циљева због тога ( Пример: дуже време ангажовања корисника на одређеној страници) назива се Оптимизација одредишне странице - чији је циљ да привуче више корисника и одржи их ангажованим на одређеној страници.

Овај процес углавном укључује испитивање са више варијација, прикупљање статистика и уношење промена на основу добијених вредности / резултата.

Не само да се ограничава на веб локације, већ је за мобилне апликације потребно и вишеваријантно тестирање. Веб странице и мобилне апликације састоје се од комбинација променљивих елемената, па се стога мултиваријантно тестирање врши како би се утврдило која комбинација варијација најбоље делује.

Ово игра пресудну улогу у стратегији интернет маркетинга.

Врсте МВТ тестирања:

На основу расподеле саобраћаја у више верзија варијација, постоје вишеструко врсте вишеваријантног тестирања који се могу извршити:

а) Потпуно факторско испитивање:

То је најпожељнији облик МВТ тестирања у којем се свака могућа комбинација варијација елемената тестира подједнако преусмеравањем саобраћаја на веб локацији док се не пронађе победник. Свим могућим комбинацијама дата је једнака вероватноћа. Најбоља ствар код ове методе је што не постоје претпоставке и заснива се на чврстим бројевима / статистикама што је чини врло поузданом и најпрепоручљивијом.

Једина мана је промет. Са повећањем броја различитих комбинација, потребно је пуно промета на веб локацији да би се анализирали подаци и одлучило победник.

б) Делимично или делимично факторско испитивање:

Како назив указује, само је део свих верзија комбинација варијација изложен промету на веб локацији. За остатак комбинација раде се статички математички прорачуни како би се пронашла најбоља стопа конверзије.

Тагуцхи метода је најпопуларнија метода за фракционо факторско вишеваријантно испитивање. Ова метода даје мање тачан резултат јер се испитује само узорак варијација, а не све. Иако је овој методи потребно мање времена за анализу победника, резултат се никада не може сматрати тачним као што је то случај у случају потпуног факторског тестирања.

ц) Адаптивно вишеваријантно испитивање:

Ово је нови приступ вишеваријантном тестирању. У овом случају се анализира одговор посетилаца на веб страници у реалном времену како би се утврдила најбоља верзија комбинације варијација.

д) Дискретни избор:

Ова метода открива ефекте интеракције, рецимо како људи стварају компромисе из перспективе одлуке о куповини. То је сложена техника која систематски мења атрибуте или елементе садржаја.

е) Оптималан дизајн:

Ова метода укључује понављање и талас тестирања. Поред тестирања максималног броја варијација огласа у минималном времену, маркетиншким стручњацима такође омогућава да размотре везе, интеракције и ограничења у елементима садржаја веб локације или апликације. Ово помаже у проналажењу оптималног решења.

Пређимо даље на важно питање: Може ли веб маркетинг бити оптимизован вишеваријантним тестирањем?

Одговор је одлучно „Да“.

Коришћењем мултиваријантног тестирања можемо јасно одредити шта треба применити, а шта избегавати. Све је усмерено на искуство посетиоца.

Следећи аспекти се узимају у обзир приликом извођења мултиваријантног тестирања:

# 1. Предуслов за мултиваријантно тестирање је: Дефинишите маркетиншке циљеве или испитајте циљеве за веб локацију. У наставку је неколико примера:

• Остварите максималан приход / профит оглашавањем, продајом производа, платите кликове.
• Створите свест о бренду код клијентеле
• Уштедите на трошковима, нпр.: Води кориснике до самопослуживања путем честа питања, уместо на мрежи, у личном сервису.

#два. Треба тестирати само оне ствари које истински циљају маркетиншке циљеве организације.

# 3. Изаберите само оне елементе који ће тачно мерити маркетиншке циљеве.

Примери могу бити:

• Да бисте зарадили више новца, странице на којима су опције попут „Купи одмах“ / „плаћање“ / токови за довршавање регистрације или регистрације треба да буду усредсређене на.
• Да бисте створили свест за посетиоце и промоцију, „пошаљите пријатељу“ / „упутите пријатеља“ / „поделите“ итд. Може вам добро доћи
• Ради уштеде фокус би могао бити на елементима као што су честа питања, помоћ, контакт, позив, кликови „Додај у корпу“ који воде до страница захвалности итд.

Како се врши мултиваријантно тестирање

1. Утврдите проблем

Први корак је идентификовање проблема. Ово вам даје обим побољшања за вашу веб локацију или апликацију. На пример, проблем може бити било какав попут тога зашто посетиоци веб странице не кликћу на дугме за преузимање.

2. Формулиши хипотезу

Поставите хипотезу за побољшање веб странице. На пример, хипотеза може бити да купци не кликћу на дугме за преузимање јер његова видљивост није привлачна. Дакле, чинећи га привлачним, дошло би до повећања преузимања.

3. Направите варијације

Изаберите факторе и направите варијације. Претпоставимо да су два фактора наслов „Преузми“ и веза „ПДФ произвођач“. Као пример, имамо испод 12 варијација:

4. Одредите величину узорка

Откријте колико је посетилаца потребно на свакој страници, колико вам је потребно да покренете тест, колико варијација имате и статистичку значајност.

5. Тестирајте своје алате

Тестирајте све (углавном, да ли ваша веб страница / апликација добро функционишу) пре него што започнете да покрећете тест, тако да ништа не отрова резултате теста.

6. Почните да возите саобраћај

Почните да подстичете саобраћај према својим варијацијама.

7. Анализирајте своје резултате

Након дуготрајног извођења теста, добићете резултате за анализу. Пример је приказан у наставку:

Они који имају 95% или више нивоа поверења су статистички значајни резултати.

8. Учите из својих резултата

Ово је последњи и важан корак. Из мултиваријантног теста сазнаћете о својим веб страницама / апликацији и њеним посетиоцима. Ово учење можете користити за будуће тестове.

Реч опреза - Водите рачуна о следећим стварима приликом извођења мултиваријантног тестирања:

Грешке које треба избегавати

1. Неправилан избор варијанти . Јер нпр. претпоставимо да истовремено променимо величину фонта, боју и стил текста наслова у једној верзији комбинације варијација. Тада ће бити тешко анализирати из примљених података о томе која је варијација наслова (било да је величина слова, боја или стил) учинила да посетилац другачије реагује.
2. Прекратак распон пробног рада Мултиваријате . Рано окончање пробног рада и одабир малог опсега података за анализу победника може довести до неважеће статистике.
3. Предуго распон пробне вожње Мултивариате. Предуго извођење теста за анализу маргиналних података такође доводи до велике губитке времена
4. Погрешно разумевање кључних индикатора. Фокусирање, анализа и праћење променљиве комбинације оних индикатора који су безначајни или нису повезани са крајњим циљем
5. Само неколико кључних показатеља учинка су идентификовани док се многи други не прате
6. Одлучивање о врсти посете посетиоца на веб страници. Ово може бити врло ризично и проблематично јер нису сви посетиоци исти.
7. Не анализирајући резултате и уношењем исправних промена на веб локацију.

До’с и Дон'тс

Са горње листе, резиме Радити и не радити може бити:

Не треба:

Не покушавајте да укључите пуно променљивих у тест. Што је већи број променљивих за тестирање; веће ће бити комбинације, што заузврат значи да је за прикупљање значајних статистичких података потребно више промета.

Да ли:

1. Прегледајте све верзије комбинација варијација пре почетка пробног рада, јер би неки од њих могли бити некомпатибилни или нелогични. На пример, једна од комбинација променљивих је наслов који каже „50% попуста на претплату“ и дугме за искључивање „Бесплатна претплата“. Такве треба уклонити.

2. Одлучите о утицају верзија комбинација на стопу конверзије. Укључивање само оних комбинација које имају већи утицај на стопу конверзије је добра идеја.

3. Процените промет на веб страници како бисте прикупили значајне статистичке податке. Пре почетка пробног рада, боље је имати јасну представу о промету на веб страници. Ако веб страница има само 100-200 посетилаца дневно, требало би да узмемо у обзир неколико променљивих само за извршавање мултиваријантног теста.

За и против

До сада смо видели шта је мултиваријантно тестирање, како се то ради, грешке, фактори, шта треба, а шта не, итд. Погледајмо сада неке Прос и Цонс од тога:

Прос:

1. Бољи увид и разумевање утицаја променљивих или елемената на стопу конверзије Више промета доводи до више статистичких података што заузврат доводи до боље анализе и доношења одлука у погледу најбоље комбинације променљивих за постизање крајњег циља.
2. У погледу промена дизајна и изгледа, мултиваријантно тестирање је флексибилно.

Против:

1. За вишеваријантне пробне вожње треба више времена.
2. За добијање значајних статистика потребно је пуно промета на веб страницама.
3. Сложеније је поставити пробне вожње.
4. Захтева већи број верзија променљивих комбинација за пробно покретање.

А / Б тестирање

Будући да је то кратка листа свих ствари Мултиваријантног тестирања, разноликости тестова који се могу обавити за оптимизацију веб страница нема краја, а друга популарна доступна метода је А / Б тестирање .

Шта је А / Б тестирање?

( слика извор)

А / Б тестирање је понекад познато и као Сплит Тестинг . Међутим, сплит тестирање је другачије. Разлику између њих видећемо у каснијем делу овог водича.

У А / Б тестирању, две верзије исте веб странице се тестирају са једнаком количином промета на веб страници. Верзија која постигне максималан број конверзија је коначни победник. Ова нова верзија дефинитивно повећава стопу конверзије.

Пример А / Б сплит тестирања:

Да разумемо рад А / Б тестирања са малим примером :

оквир вођен подацима у примеру селена вебдривер

Горња слика је веб странице за безбедност.

Ова слика се састоји од сивог дугмета на којем стоји „ Учествујте у квизу и освојите узбудљиве награде '. Ова оригинална веб страница се сматра„ верзијом '. Сада је верзија „Б“ дизајнирана са променом боје дугмета од сиве до црвене.

Ово је приказано на доњој слици:

Промет веб страница уживо је преусмерен на обе верзије. Након што је довољно посетилаца приступило тесту и са добијеним статистичким подацима, лако се може утврдити која верзија има већи ефекат на стопу конверзије.

Овде у горњем примеру, дугме које каже „ Учествујте у квизу и освојите узбудљиве награде ”У црвеној боји привукло је више посетилаца да притисну дугме и учествују у квизу од старијег сивог дугмета.

Тако је постигнут крајњи циљ веб странице да повећа већи приход.

Прос и Цонс А / Б тестова:

Прос:

1. Једноставна и једноставна метода за постављање експеримената за оптимизацију веб страница.
2. Поуздани и тачни резултати могу се лако утврдити чак и уз мали промет на веб страници.
3. Тестови се могу извршити врло брзо и статистички подаци могу се анализирати како би се постигао крајњи циљ.
4. Не зависи много од било ког облика технологије.
5. Погодније за промене у изгледу, садржају и дизајну било које веб странице.

Против:

1. Само неколико или рецимо ограничени број промена на веб страници може се истовремено извршити.
2. Није могуће утврдити утицај различитих променљивих присутних на веб страници једни на друге.

Табела поређења:

А / Б тестирање вс Мултиваријантно тестирање вс Сплит тестирање

А / Б тестирање, мултиваријантно тестирање и сплит тестирање су три главне врсте УКС (Усер екпериенце) варијанти тестирања. Да видимо како се међусобно разликују.

Две слике дају вам врло добро илустративно поређење А / Б тестирања и мултиваријантног тестирања.

Мултиваријантно испитивање

Сплит тестирање:

Овде имамо још једну варијанту која је позната као сплит УРЛ тестинг, која је много сложенија од А / Б тестирања и укључује промене на страни сервера , где имамо две различите веб странице које су тестиране једна против друге. Ова врста тестирања добро функционише за одредишне странице у случајевима када дизајнерски тим треба да одлучи који ће радити боље.

А / Б / Сплит / Алати за вишеструко испитивање

На тржишту постоји пуно алата за ове три врсте УКС тестирања. Овде бих навео неколико најбољих које можете истражити. То су Гоогле Оптимизе, Оптимизели, ВМО, Кубит, Макимисер и АБ Тасти.

Закључак :

Обе методе, А / Б и Мултивариате тестирање повећавају стопу конверзије, побољшавају перформансе и оптимизују веб странице и апликације. Обе су корисне на свој начин и долазе са својим јединственим недостацима и изазовима - на нама је да идентификујемо и анализирамо која метода ће најбоље одговарати захтевима.

Ми, тестери, углавном смо укључени у тестирање промена извршених за примену мултиваријантних или А / Б тестова. Једном када се ове промене направе и тестирају, маркетиншки или пословни тим може их покренути у производном окружењу ради прикупљања резултата.

Дакле, веома је важно да тестери врло пажљиво тестирају ове промене, у супротном, коначни резултати би били нетачни, што би резултирало великим пословним губицима, јер је то већину времена директно повезано са пословним приходима.

Препоручено читање

• Најбољи алати за тестирање софтвера 2021. (Алати за аутоматизацију КА теста)
• Преузимање е-књиге за тестирање буквара
• Статичко испитивање и динамичко испитивање - разлика између ове две важне технике испитивања
• Испитивање оптерећења помоћу ХП ЛоадРуннер водича
• Разлика између тестирања радне површине, клијентског сервера и веб тестирања
• Шта је гама тестирање? Завршна фаза испитивања
• Шта је испитивање усаглашености (испитивање усаглашености)?
• Посао за КА помоћника за тестирање софтвера