Продолжение экспериментов над Lookalike

Продолжение экспериментов над Lookalike

L3n1n

Который год я пытаюсь понять как Facebook собирает Lookalike ( они же ЛАЛ или LL) аудитории. Сегодня руки дошли до нового эксперимента.

В предыдущих экспериментах многие мне говорили что выборка в 5-10-15к очень маленькая для хорошего подбора ЛАЛ и что анализ таких аудиторий глупости. Проанализировав результаты и заполучив от партнеров Customer File с LTV я начал проводить еще один эксперимент при котором я сразу же заметил что что то не так. Выгрузив в Facebook 50k+ лидов с LTV и создав ЛАЛ я получил страшную картину. Более 80% ЛАЛ были люди 18-25лет. Более 60% ЛАЛ были МУЖЧИНЫ (!). Как так? Я ведь знаю что мои основные клиенты это Ж 30+. И файл с клиентами не мог содержать М аудиторию еще и возраста 18-25 лет.
Прошелся по активным и старым кампаниям и нашел еще один очень хороший источник для тестов где можно собрать аудитории клиентов по полу и есть приличный обьем. Так же сделал выборку людей только за этот год что бы данные были свежими.

Для простоты эксперимента убираем все LTV, даем фб шанс подобрать нам только М или только Ж. На это им ума хватит казалось бы? :)


Дано:

Customer List 1 - 100k femaleThisYear

Customer List 2 - 50k femaleThisYear

Customer List 3 - 100k maleThisYear

Customer List 4 - 50k maleThisYear


Как видим на скрине, Fb отлично сматчил наших клиентов и мы получили по 42к/45к/110к/81к аудитории для создания ЛАЛ.

Из каждой аудитории создаем Lookalike 1% (который по словам Fb самая похожая на источник аудитория) и приступим к анализу.

Наложение Ж100к на Ж50к ЛАЛ
Наложение М100к на М50к ЛАЛ

Довольно интересный результат. Файлики Ж100к однозначно содержит всех людей из файлика Ж50к, и как итог мы получили ЛАЛ которые на 50% одинаковы.

Что это означает - то что увеличение размера аудитории источника в 2 раза дало всего на 50% другую аудиторию. Хорошо это или плохо мы конечно же не знаем..

Идем дальше:

ЛАЛ из 50к Ж состоит только на 68% из Женщин
ЛАЛ из 100к Ж состоит только на 72% из Женщин


ЛАЛ из 50к М состоит на 5% из Женщин
ЛАЛ из 100к М состоит на 5% из Женщин


И вот на этом этапе и пришел ШОК..

Напоминаю, мы выгрузили в Facebook файлики с клиентами только Ж и только М что бы посмотреть соберет ли нам умнейший ИИ нужную для работы ЦА.

Результаты видны на скринах и подписи к ним. И тут тоже много интересного.

Почему при формировании аудитории на Женщин мы получаем 32% и 28% Мужчин? WTF FB?

Если кому сложно воспринимать информацию в процентах, то из аудитории 2200000 мы получили 1500000 Ж + 700000 М.

При формировании аудитории из источников которые содержат только М картина кардинально другая. Там всего 5% "лишних".

Почему? ..............


Я проводил похожий эксперимент в прошлом году и если память не подводит, то в М и Ж аудитории попадало всего 1-2% "не наших". Что произошло с Fb что он стал на столько хреново подбирать аудитории я понятия не имею, но у меня есть догадки что падение качества трафика которое началось весной этого года напрямую связанно с этим.

Так же есть предположение что оптимизации рабочих кампаний Fb делают теми же алгоритмами которые подбирают Lookalike. Как они работают - смотрим выше :)