Коли у 2008 році під час президентських перегонів команда Барака Обами зіштовхнулася із проблемою перетворення відвідувачів інтернет сторінок кандидата на підписників, звернувшись до прийомів комерційного маркетингу, вони одразу вирішили змінити стиль написання на їх веб-сайті . Було використано три різні написи: «Дізнайся більше», «Приєднуйся зараз», «Підписуйся зараз» замість банального виразу «Підписуйся». Вираз «Дізнайся більше» був ефективнішим на приголомшливі 18,6%.(1) Під час тестування промо-матеріалів, компанія обирала різні варіації відео та фото з 6 варіантів, і сама вдала комбінація підвищила рівень конвертації відвідувачів у підписників на 3%. Крапля в морі, натомість, кількість нових підписів на електронну розсилку збільшилася на 3 мільйони, а кількість додаткових пожертв сягнула 60 мільйонів доларів.(2),(3),(4).Чотири роки потому, коли Обама балотувався на другий термін, його команда провела не менше 500 подібних тестів A/B в інтернет-мережі та електронних повідомленнях за 20 місяців, збільшивши кількість пожертв на 29%, а кількість підписників на 161%.(5),(6).
Під час тесту A/B, який іноді називають паралельним тестуванням, порівняють два, або більше варіантів поширення інформації для визначення найбільш досконалого результату. Часто місцем для таких експериментів є сторінки для збору пожертв, що дає змогу отримати більше коштів. Наприклад, під час президентської кампанії 2016 кандидат у президенти Бен Карсон тестував що саме приносить більше пожертв- його книга, або бейзболка з закликом голосувати за нього. Відбувалось це так: користувачі переадресовувались на сторінку, де пропонувався один з вищезазначених варіантів, і на основі того, що обиралось більше, робився висновок щодо ефективності кожного з варіантів. У разі, якщо бейзболка виявлялась популярнішою, можливо було провести ще один тест. Скажімо, порівняти цю ж бейсболку із еко-сумкою. Ці поступові дії підвищували ефективність веб-сайту.(7)
В статье, опубликованной на medium.com, исследуется, как в президентской кампании Бена Карсона в 2016 году проверялось, что является более эффективным подарком во время сбора пожертвований на избирательную кампанию: книга или бейсболка. Тест проходил на его веб-сайте BenCarson.com, который не был активным на момент написания.
Источник: Medium, 11 марта 2019 года.
Хоча тест A/B і є типовим для IT-індустрії та політики сьогодення, аналоги він мав ще у 20-х роках 20 століття. Британець Рональд Фішер займаючись статистичними розрахунками, математично сформулював закономірності зростання різних сільськогосподарських культур, паралельно тестуючи різні види ґрунту: з додаванням добрива та без.(8) З тих часів, A/B тестування стало невід’ємною частиною політики, і застосовується для підвищення ефективності інтернет-сторінок, електронних повідомлень (тем повідомлень, структури), дизайну (зображень, фону, активних елементів), заголовків, листів, телебачення, радіо, обдзвон, і навіть, написання «правильного» тексту для пошуку інформації.(9),(10),(11),(12),(13).
Низка сервісів полегшила процес, що дало змогу проводити тестування багатьох змінних одночасно.(14),(15).
Персональні дані є основою на кожному етапі: від запуску тесту, до оцінки результатів. Спочатку вони використовуються для визначення об’єктів тестування. Якщо метою є мобілізація голосів працюючих матерів на одному виборчому окрузі, або підвищення їх явки мітингах на іншому, -починається робота. Для цього використовуються адреси, отримані або з виборчих реєстрів, або шляхом обміну даними ,чи за допомогою інших джерел. Допоки учасники кампанії мають актуальну інформацію і достатню кількість людей для статистично дійсного тесту, об’єктом тестування може стати будь-що або будь-хто в рамках закону.
Персональні данні застосовуються і для інтерпретації результатів взаємодії. Якщо ви отримуєте електронну розсилку від кампанії, ймовірно, те чи читаєте ви що там написано, або, чи відвідуєте ви запропоновані веб-сторінки знаходиться під пильним оком дослідників, яким вже відомо, наскільки ви зацікавлені. Зібрані таким чином дані можуть дати ще більше інформації: скасувавши підписку на розсилку від кандидата ви, скоріше за все , не проголосуєте за нього на виборах. При регулярній взаємодії з такою розсилкою, в очах політиків ви стаєте потенційним виборцем.
Велика Британія: Домінік Каммінгс, голова кампанії «Vote Leave» під час референдуму 2016 року щодо членства ЄС у Великобританії (так званий Брекзіт) розповів, як команда «Vote Leave» як перманентне експериментування та використання персональних данних допомогло їм перемогти. За словами Каммінгса, опитуючи виборців у Великій Британії, аналітики даних мали можливість «фокусуватись на жінках між 35 та 45 років, які живуть в певному географічному регіоні, мають або не мають вищої освіти… Фактично ми провели низку експериментів, та відокремили те, що працювало….» . Виборців на було поділено три категорії: хто точно проголосує за вихід, хто не проголосує та людей, що не визначилися із вибором. Кампанія витратила 98% свого маркетингового на роботу саме із третьою групою та провела тести із 5 різними закликами для визначення найбільш ефективного.(16) Перемогло повідомлення, яке складалося із 3 слів: «Поверни назад свободу». Дослідження визначило, що слово «назад» викликало гнів у виборців, небажання втратити те, що вони колись мали – свободу.(17)
На цьому скріншоті з архіву Facebook зображені дві політичні реклами спрямовані проти Брекзіту, які використовували те саме зображення, але різний текст. Оголошення зліва відображалось користувачам менше 1000 разів, а праворуч - від 5 до 10 тисяч разів. Але відсутні показники, які показують, яка реклама привертала більше уваги.
Джерело: Facebook Ad Library, 22 лютого 2019 року.
Сполучені Штати Америки: Певні політичні сили у Сполучених Штатах мають розвинуте A/B тестування на високому рівні, навіть у порівнянні порівнюючи із приватними компаніями.(18) Це було найбільш помітно під час президентської кампанії Трампа у 2016 році. Гері Кобі, голова департаменту цифрової реклами та фандрайзингу кампанії Трампа, назвав її «тест A/B на стероїдах».(19) Повідомляється, що учасники кампанії проводили від 40 до 50 тисяч тестувань кожного дня (20), і це принесло надзвичайно велику користь. Колишній директор з маркетингових технологій Республіканського Національного Конвенту (РСК) Майкл Бабяк стверджував: «Команда з ефективності, оптимізації та тестування РСК … провела понад 300 тестів на сторінці DonaldJTrump.com з липня по листопад 2016 року, отримавши додаткових 30 мільйонів доларів пожертв.(21) Команда виявила, що протрампівські повідомлення постійно «перевершували будь-які повідомлення проти Гіларі або повідомлення з негативним посилом».(22) Вже після виборів у травні 2018 року Кобі написав у Twitter про продовження роботи зі збору інформації. 4000 рекламних оголошень викладені для «тестування та дослідження».(23)
На снимке экрана буклета тестирования RNC, размещенного на www.scribd.com, изображено, как во время предвыборной кампании Дональда Трампа сравнивалась эффективность этих двух фоновых изображений на странице для пожертвований. Образ Трампа оказался примерно на 80% эффективнее, чем образ Клинтон.
Источник: RNC Testing Booklet, 7 января 2019 года.
Майже із 100-відсотковою вірогідністю ви приймали участь у тестуванні A/B. Як написав президент OKCupid Крістіан Руддер у своєму блозі у 2014 році: «Подумайте: якщо ви використовуєте Інтернет, то ви є учасником багатьох досліджень на будь-якому веб-сайті. Ось як працюють інтернет-сторінки».(24) Інший спеціаліст дав наступний коментар: «кожен продукт, бренд, політик, благодійна організацію, громадський рух намагаються на певному рівні маніпулювати вашими емоціями. Для цього розуміння як краще це робити їм потрібні тести A/B.(25) Тестування A / B зараз є стандартною практикою для будь-яких організацій, які працюють у мережі Інтернет. Хоча ви, можливо, зможете визначити тести, у яких ви берете участь, перевіряючи гіперпосилання або аналізуючи сторонні файли cookies, не існує можливості абсолютно точно дізнатися як вас досліджували.
Ці оголошення з архіву реклами Facebook заохочують індійців організувати групові зустрічі для перегляду звернення прем'єр-міністра Нарендри Моді до нації. Повідомлення щодо реєстрації на захід однакові, але зображення трохи відрізняються. Усі три оголошення коштували менше 15 доларів і були переглянуті від 10 до 60 тисяч разів.
Джерело: Facebook Ad Library, 11 березня 2019 року.
↘ Тестування A / B дозволяє кампаніям перевірити свої припущення та уникнути відкладання HiPPO (найвищої оплаченої думки особи), іронічного терміну, що описує звичайний процес прийняття рішень. Якщо політичне повідомлення буде протестовано належним чином, воно може вказати на помилкові припущення.
↘ За дослідження одного експерта, логічне завершення тренду на тест A/B може настати у вигляді великої кількості унікальних, орієнтованих на кожного виборця повідомлень, що постійно оновлюються на основі тестування A/B.(26) Таке тестування A/B може бути вибірково націлене і налаштоване на інтереси людей, що у свою чергу може підірвати суспільне розуміння політичних аспектів та відкрити шлях для більш маніпулятивних технік.
↘ Залежно від розвитку автоматизації тесту A/B, алгоритми можуть створювати більшу кількість варіантів та комбінацій тексту, медіа, активних елементів тощо на основі даних, що вказуються учасниками кампанії. Це може призвести до того, що комп’ютери будуть замість людей вирішувати, що читати або бачити потенційним виборцям. Це може стати прецедентом створення персоналізованого політичного контенту, вільного від людського контролю..
Тестування A / B рухається в напрямку алгоритмічного створення варіантів. Використовуючи дані з метою створення найбільш переконливої реклами для певного користувача, алгоритмічно створені варіанти дозволяють комп'ютерам вирішувати, що бачать користувачі, налаштовуючи різні рекламні оголошення для різних осіб. Цей знімок екрана був отриманий з рекламного «динамічно- креативного» відео у Facebook - популярній платформі для тестування передвиборчих кампаній. В аудіо-записі пояснюється, що рекламодавці надають зображення, відео, текст (наприклад, заклики до дій), бюджет та вказують цільову аудиторію, а тест вже вирішить, які комбінації найкраще підходять для певної аудиторії.
Джерело: Facebook Dynamic Creative, 7 січня 2019 року.
↘ Якщо тест A/B демонструє бажаний та масштабний вплив, які з виборців, що обрали найменш популярний варіант, в результаті будуть менш схильними отримувати агітаційні матеріали від кандидата, добровільно підтримувати його, слідкувати за ним або голосувати за нього?
↘ Виборці зазвичай навіть і не підозрюють, що беруть участь у тестуванні. Більш того, вони самі дають дозвіл на обробку даних, коли погоджуються із політикою конфіденційності, яку, як правило, не читають. Внаслідок недостатньої обізнаності учасники тестування не можуть припинити надавати свої данні. Окрім цього, дуже багато виборців не уявляють про вплив попередніх тестувань, у яких вони ,не здогадуючись, приймали участь.(27),(28)
↘ Політичні кампанії часто проводять тестування без незалежного та етичного нагляду за ним.(29)
↘ Тест A/B може бути використаний як «тестовий полігон» для політиків – простір для випробовування якоїсь ідеї - її приховування, якщо та провалиться, або її просування, якщо вона спрацює.
↘ Тест A/B може допомогти політикам уникнути ситуації, коли вони не мають чіткої позиції у певному питанні, за допомогою порівняння різних повідомлень, що врешті-решт приведе до виграшного варіанту. Один автор зауважив: «Замість того щоб шукати компроміс або приймати ризиковані рішення з точки зору політики, емпіричні дані, отримані від тесту A/B, можуть принести оптимальне рішення: який сенс дискутувати, коли можна просто зробити тестування?»(35)
↘ Тест A/B ризикує «спровокувати перехід від процесу пошуку найбільш діючих політичних рішень» до пошуку найкрасивіших активних елементів, що відволікає від нагальних проблем.(36),(37)
↘ Тест A/B ускладнює моніторинг кампанії. Замість того щоб відслідковувати результати на одному веб-сайті, моніторинговим групам доведеться відслідковувати кілька варіантів одного й того ж сайту.
Автор: Варун Башукарла