НЕЙРОСЕТЕВОЙ АНАЛИЗ ИЗОБРАЖЕНИЙ В СОЦИАЛЬНЫХ СЕТЯХ: ПЕРСПЕКТИВЫ СОЗДАНИЯ ЛИЧНОСТНОГО ПРОФИЛЯ НА БАЗЕ ИЗОБРАЖЕНИЙ ПОЛЬЗОВАТЕЛЯ
Развитие сетевых ресурсов и повышение уровня их доступности оказали существенное влияние на образ жизни, существенным образом изменив способы коммуникации и предоставив новые возможности получения информации, приобретения товаров, услуг, проведения финансовых операций. Одним из наиболее востребованных направлений использования интернета является общение в социальных сетях.
Согласно аналитическому докладу о тенденциях развития интернета в России, подготовленному Институтом статистических исследований и экономики знаний Национального исследовательского университета «Высшая школа экономики», в 2016 г. более половины (55,6%) россиян в возрасте 15–72 лет общались в социальных сетях. Это на 6 процентных пунктов выше показателя 2014 г. (49,5%), и по этому показателю Россия входит в десятку стран-лидеров [1].
Очевидно, что в сложившейся ситуации неуклонного роста охвата интернет-аудитории социальными сетями растёт и количество информации, предоставляемой пользователями в открытый доступ. Данная информация является ценным источником для государственных и частных компаний, предоставляющих любого рода услуги, так как позволяет персонифицировать предложение, переводя его из массового в точечное, индивидуальное. Однако достичь подобного эффекта можно лишь при должной обработке полученных данных и соотнесении их с личностным профилем потенциального получателя услуги. В связи с этим на первый план выходит вопрос о том, какими методами можно выявить взаимосвязь между личностным профилем пользователя и его профилем в социальных сетях.
Для решения исследовательских задач личность человека может быть описана как набор факторов, которые задают ему некоторый вектор поведения. Такой подход к объяснению феномена личности в психологии называют диспозициональной личностной моделью, в основе которой лежит ряд склонностей (диспозиций) человека вести себя, реагировать в определённых ситуациях тем или иным образом.
Анализ личностного профиля пользователя социальных сетей может облегчить понимание его потенциальных потребностей, что открывает широкие перспективы для маркетинга, здравоохранения, рекомендательных систем [2,7]. Практическая польза не осталась незамеченной для научного сообщества и привела к возникновению за последние годы большого числа исследований, посвящённых поиску и описанию взаимосвязей между контентом профилей пользователей социальных сетей и их политическими взглядами [10], удовлетворённостью жизнью [5] и многими другими аспектами.
Одной из наиболее известных и признанных в научной среде диспозициональных моделей личности является пятифакторная модель [11]. Данная модель включает в себя пять общих и относительно независимых диспозиций (черт, свойств, характеристик, факторов, шкал): нейротизм, экстраверсию, открытость опыту, сотрудничество и добросовестность. Популярность пятифакторной модели, разнообразие тем исследований, связанных с ней, а также большое количество вариаций методик для диагностики «большой пятёрки» личностных особенностей на разных языках позволяют говорить о том, что «большая пятерка» действительно содержит универсальные ключевые характеристики, предоставляющие возможность «увидеть» личность и спрогнозировать ее поведение [6, 10, 11].
На данный момент складывается новая тенденция при выявлении личностных характеристик использовать информационную технологию, основывающуюся на анализе формальных и контекстуальных особенностей фотографической и видео-информации, публикуемой пользователями в социальных сетях Twitter, Instagram, Facebook и др. [2, 4, 8]. Важным преимуществом такого рода исследований оказывается тот факт, что визуальная информация инвариантна к аудитории, говорящей на любых языках, что позволяет преодолеть языковые барьеры и связанные с этим недопонимания в трактовке полученных результатов. Интересной представляется задача конкретизации связи между визуальной информацией, добровольно предоставляемой пользователями социальных сетей, являющейся их своеобразной самопрезентацией, и личностными факторами.
В настоящей работе в качестве исходных данных, подвергаемых обработке и последующему анализу, был взят датасет PsychoFlickr. Впервые данный датасет был собран и использован в работе Segalina, C., Cheng, D., Cristani, M. [8], посвящённой личностному профилированию на основании изображений из социальных сетей пользователя.
Датасет PsychoFlickr содержит информацию о 300 пользователях социальной сети Flickr. На каждого пользователя приходится 200 случайных изображений, выбранных из тех, что ему понравились (liked images). Важен тот момент, что это именно понравившиеся пользователю изображения, а не фотографии, сделанные непосредственно им самим. Выбор осуществлён таким образом, чтобы избежать предубеждений пользователя, связанных с его фотографическими навыками.
Кроме того, набор данных содержит самооценочные (self-assessed) и приписываемые (attributed) личностные характеристики для каждого пользователя. Первые, самооценочные, личностные характеристики базируются на результатах добровольного опроса, проведённого среди пользователей с помощью методики BFI-10 (Большая Пятёрка) (Rammstedt and John, 2007). Вторые, приписываемые, личностные характеристики основаны на оценках 12 независимых экспертов, которые просмотрели понравившиеся каждому пользователю изображения и заполнили модифицированную BFI-10 анкету.
При формировании датасета PsychoFlickr для упрощения задачи предсказания черт личности и превращения её в пять разных задач бинарной классификации, по одной для каждого признака, авторы поступили следующим образом. Они разбили диапазон значений для каждого личностного компонента на три раздела: низкий (для значений ниже первого квартиля), высокий (для значений выше третьего квартиля) средний.
В датасет были отобраны только понравившиеся изображения тех пользователей, которые продемонстрировали высокие и низкие значения личностных факторов, чтобы получить большее разделение между двумя классами.
Посмотрим на распределение данных пользователей, касающихся самооценочных и приписываемых личностных факторов, отдельно по каждому фактору. Частота распределения значений по каждому из приписываемых и самооцениваемых личностных факторов представлены на рисунках 1 и 2.
Здесь мы видим, что пользователи со средними значениями по всем личностным факторам были исключены из выборки для упрощения решения задачи бинарной классификации.
Проведя разведывательный анализ данных, мы можем констатировать, что недостающих значений или каких-либо отклонений, аномалий в полученных данных не выявлено. Формат представления данных также оптимизирован для дальнейшей с ними работы.
Перейдём к описанию результатов экспериментального исследования точности алгоритма машинного обучения для прогнозирования личностного профиля на основе изображений из профиля в социальных сетях и анализ полученных результатов.
Для решения поставленной задачи прогнозирования личностного профиля на основе изображений из профиля пользователя в социальных сетях было проведено экспериментальное исследование точности алгоритма машинного обучения, базирующегося на классических методах анализа данных: метод опорных векторов, Лассо-регрессия.
Выборка представляла собой балльные оценки каждого респондента по пяти личностным факторам, а также содержала данные об извлечённых признаках изображений с помощью сверточной сети VGG-Net. Выборка была разделена на обучающую и тестовую в соотношении 70% и 30% соответственно.
В ходе проведённого исследования были получены результаты о точности работы каждого метода применительно к предсказанию того или иного личностного фактора. С помощью метрики средней квадратической ошибки (MSE) была произведена оценка качества каждой модели. Результаты сравнения представлены в таблице 1.
Таким образом, можно сделать вывод о том, что на основании изображений профиля в социальных сетях прогнозировать степень выраженности той или иной личностной характеристики можно с разной степенью уверенности. С большей долей вероятности по изображениям мы можем предсказывать такие личностные характеристики, как доброжелательность и добросовестность. С меньшей долей вероятности по изображениям мы можем предсказывать такую личностную характеристику, как невротизм. При этом разные модели дают разную точность предсказания для разных личностных факторов.
Результаты, полученные в ходе магистерского исследования, могут использоваться во множественных сферах, таких как кредитный скорринг, таргетирование рекламы, повышение эффективности политических и рекламных кампаний, рекомендательных систем и др.