Разработали эффективную систему отслеживания инфлюенсеров

За 6 месяцев мы разработали MVP системы парсинга и скрейпинга для Instagram, Facebook и Youtube. Благодаря разработанной нами программной платформе инфлюенс-маркетинга команда клиента перешла от базы блогеров в Excel к удобному дашборду.

April 2021

Рекламное агентство Players занимается инфлюенс-маркетингом с 2014 года. Агентство придумывает и реализует проекты с блогерами в Instagram, YouTube, TikTok, ВКонтакте, Telegram, подкастах и на других платформах. От глобальной стратегии и креативных платформ до производства видео и размещения постов — за шесть лет существования на рынке команда Players Team реализовала более 500 проектов.

Агентство специализируется на блогерских проектах и предоставляет такие услуги, как интегрированный инфлюенс-маркетинг, разработка маркетинговых стратегий и креативных концепций, медиапланирование и подбор блогеров с целевой аудиторией, производство видео и стриминг, а также производство подкастов. В число их клиентов входят Nestle, Danone, Colgate, Xiaomi, McDonald’s, Samsung, Disney и многие другие. Благодаря созданной нами системе отслеживания и выбора лидеров мнений Players Team может предложить такой широкий спектр услуг и проектов.

Задача

В 2018 году агентство Players обратилось в Evrone: им требовалось разработать ПО для автоматизации работы с блогерами и инфлюенс-маркетинга.

Работу с новым клиентом Players начинает с анализа целевой аудитории, показателей и профиля пользователя, а затем, для оптимизации коэффициента удержания, ищет лидеров мнений, которые соответствуют клиенту по этим параметрам. Прежде чем обратиться к нам за разработкой сервиса для работы с блогерами, сотрудники агентства использовали в качестве базы данных таблицы Excel и вели поиск лидеров мнений и их аккаунтов в социальных сетях и на Youtube вручную.

Они исходили из того, что каждый знает, как найти популярных инфлюенсеров. Однако полезный для рекламы лидер мнений должен иметь не менее 20 000 подписчиков. Таких блогеров можно считать перспективными, и если найти к ним правильный подход и заключить, например, годовой контракт, то за этот год они могут набрать миллион подписчиков, в результате будет расти и аудитория клиента.

Проблема в том, что пользователей с 20 — 30 тысячами подписчиков непросто отыскать вручную. Например, Youtube не предоставляет возможности поиска пользователей по количеству подписчиков. Существующие сервисы для Инстаграм, Вконтакте, Facebook и других продуктов не подходили из-за отсутствия нужных функций.

Заказчику требовалось, чтобы мы создали маркетинговую платформу для автоматизированного поиска и выбора лидеров мнений. Это позволило бы опередить конкурентов: раньше всех найти соответствующих инфлюенсеров, заключить с ними контракты.

Решение

Мы начали с разработки технических спецификаций для инструмента поиска инфлюенсеров. За 6 месяцев мы разработали MVP системы парсинга и скрейпинга для Instagram, Facebook и Youtube.

Все инструменты influence-маркетинга заказчик планировал использовать внутри компании, поэтому ядром решения стала разработанная нами панель управления, содержащая списки инфлюенсеров. Были предусмотрены также фоновые воркеры — для захвата статистики инфлюенсеров из социальных сетей с помощью скрейпинга и, при возможности, API для сбора данных. Служебные поля, комментарии, списки проектов и цены также можно добавлять вручную.

Мы разработали систему на Ruby on Rails, а для фронтенда использовали React. Кроме того, мы задействовали систему Luminati VPN — крупнейший в мире прокси-сервис, с резидентной прокси-сетью из 72 миллионов IP-адресов по всему миру и интерфейсом управления прокси, не требующим написания кода.

Сбор данных в социальных сетях, таких, как Facebook, Instagram и Youtube, вести трудно, поскольку эти супер-умные сервисы постоянно совершенствуют систему защиты. Они блокируют множественные запросы, поэтому для обхода ограничений приходится постоянно менять IP-адреса. Систему VPN пришлось использовать для подключения из другого региона, чтобы нас не могли отследить и забанить.

Также мы разработали дизайн панели управления, нарисовали графику для дашборда. Теперь можно перейти в панель администратора и просмотреть статистику, чтобы, например, определить, произошел ли у блогера временный всплеск активности из-за одного конкретного видео или идёт систематический рост, который может продолжиться.

Преодоление ограничений

Поскольку в последнее время многие компании пострадали из-за утечки данных, ведущие социальные сети и другие сервисы ужесточили меры обеспечения безопасности. Компании, которые полагаются на данные с этих сайтов, постоянно гуглят популярные инструменты для парсинга в социальных сетях (Вконтакте и Фейсбук) в 2021 году.

Но краулинг и скрейпинг медиа-ресурсов сейчас усложнились как никогда. С ограничениями инструментов для парсинга в социальных сетях мы столкнулись прямо во время работы над этим проектом, но смогли найти обходные пути.

В 2018 году из-за утечки данных из Facebook Марка Цукерберга вызвали на слушание в Сенат США. В этот момент мы уже интегрировали систему с соцсетью, и тут Facebook внезапно отключил многие способы сбора данных. Нам пришлось переделать парсеры, чтобы система могла извлекать данные.

Результат

Благодаря разработанной нами программной платформе инфлюенс-маркетинга команда клиента перешла от базы блогеров в Excel к одному удобному дашборду. Заказчик очень доволен — мы разработали именно то, что нужно для управления бизнесом и его расширения.

Разработанное нами решение для рекламных технологий — единственное на рынке, и заказчик до сих пор использует его для поиска лидеров мнений и автоматизации рекламных кампаний с блогерами. После завершения первоначальной разработки агентство Players снова обращались к нам с просьбами модифицировать продукт в соответствии с меняющимися потребностями, изменениями в политике парсинга и скрейпинга аудитории на Фейсбуке.

Если вам нужно разработать систему парсинга или Marketing Tech решение для вашего проекта, оставьте заявку в форме ниже, мы свяжемся с вами в ближайшее время и обсудим, чем мы могли бы вам помочь.

Мы разработали для клиента программную платформу для инфлюенс-маркетинга, которая помогла ему перейти от огромного количества таблиц Excel к одному удобному дэшборду. Свяжитесь с нами, если вам нужно разработать похожую систему для вашего проекта, и мы сделаем всё возможное, чтобы помочь!
Олег Балбеков
CEO Evrone
Будем на связи
Прикрепить файл
Максимальный размер файла: 2 МБ.
Допустимые типы файлов: jpg jpeg png txt rtf pdf doc docx ppt pptx.