Способ оценки функционального состояния по показателям походки и/или кинематики движений и применение способа в сфере продвижения товаров и услуг
Изобретение относится к области психологии, физиологии, нейрофизиологии, маркетинга, а именно к способу оценки функционального состояния человека по комплексу показателей походки и/или кинематики движений, и может быть использовано в сфере продвижения товаров и услуг различных компаний, в частности для увеличения конверсии продуктов, предлагаемых компаниями пользователям. Предложен способ, в котором осуществляют регистрацию показателей походки и/или кинематики движений по меньшей мере одного пользователя при посещении компании, по полученным показателям с помощью обученной нейронной сети определяют функциональное состояние пользователя и предлагают пользователю рекламное предложение и/или рекламный продукт, наиболее соответствующие этому определенному функциональному состоянию, такое, которое с наибольшей долей вероятности будет воспринято пользователем как положительное, и/или его дальнейшее потребительское поведение с наибольшей долей вероятности будет выражено в согласии воспользоваться предложенным продуктом или услугой. Изобретение обеспечивает расширение арсенала способов определения функционального состояния людей, увеличение положительных откликов пользователей при предложении им товаров и услуг, увеличение конверсии товаров и услуг, предлагаемых компаниями и/или предприятиями, реализующими товары или услуги, повышение точности прогнозирования потребительского поведения. 5 з.п. ф-лы, 4 пр.
Изобретение относится к области психологии, физиологии, нейрофизиологии, маркетинга, а именно к способу оценки функционального состояния человека по комплексу показателей походки и/или кинематики движений, и может быть использовано в сфере продвижения товаров и услуг различных компаний, в частности, для увеличения конверсии продуктов, предлагаемых компаниями пользователям.
Одной из ключевых задач, стоящей перед компаниями, реализующими свои товары и услуги является повышение конверсии создаваемых ими продуктов. Какие инструменты позволяют повысить уровень конверсии? Этот вопрос является практической и прикладной проблемой, для решения которой необходимо привлекать современные технологии.
В последние годы при взаимодействии с клиентами у компаний различных сфер существенно возросла доля сервисной составляющей, совершенствуется онлайн взаимодействие с потребителем, «выгодные условия» встраиваются в информационное пространство. Поиск новых клиентов, улучшение способов сотрудничества с теми, кто уже является потребителем продуктов - задачи, которые постепенно переходят в наиболее эффективное взаимодействие с пользователями в онлайн среду.
В последнее время внимание разработчиков продуктов обращено на исследования нейромаркетинга, поиск инструментов, способных выявить мотивы совершения тех или иных действий потенциального потребителя. Особое внимание в этом вопросе уделяется психологическому, эмоциональному состоянию потребителей. Например, статья «Нейромаркетинг: современный подход в классическом маркетинге» (Червякова Е.А., 2019) - первостепенное внимание уделяется рассмотрению аспектов влияния нейрохимических процессов на принятие подсознательных решений, а также рассматриваются методы принятия решений, исследования в области когнитивных искажений, способы фиксации физиологических данных при исследовании эффективности дизайна, рекламы, свойств продукта и популярности бренда.
Также на данный момент, имеются некоторые данные, которые позволяют говорить о том, что в функциональном состоянии покоя и релаксации, а также при сильном эмоциональном возбуждении, утомлении, заболевании, стрессе, возрастает внушаемость человека. Внушение - один из способов управления человеческим поведением, используемым в рекламе и маркетинге. Это технология суггестивного воздействия на психику человека, связанная с ослаблением критичности его мышления и предложением ему установок, которые он не осмысливает и не анализирует в достаточной мере. В отличие от процедур убеждения, в которых приводятся доводы и рассуждения, побуждающие человека самостоятельно и сознательно принимать какое-то решение, суггестивные процедуры действуют «в обход» сознания. Человек способен наиболее сопротивляться рекламным установкам в состоянии стабильной активности, мобилизации - состоянии позволяющем поддерживать рабочий уровень внимания.
Единственно точными результатами определения подсознательного отношения покупателей к продуктам и услугам могут обладать исключительно физиологические данные, считанные специальными устройствами, так как они максимально обезличены. Среди них: 1. Наблюдение за сердечно-сосудистой системой человека (оценка вариабельности сердечного ритма); 2. Измерение электрического сопротивления кожи (для выявления повышенного потоотделения); 3. Регистрация сокращения мышц лица; 4. Айтрекинг (регистрация направления взгляда, размера зрачка и длительности задержки взгляда); 5. Анализ вызванных потенциалов (анализ реакции мозга на те или иные раздражители); и другие.
В настоящее время значительный прорыв технологий связан с развитием нейронных сетей. «Машинное зрение» позволяет осуществлять распознавание элементов практически в любых условиях. Технологии искусственного интеллекта стремительно внедряются в ИТ обеспечение компаний. Однако, использование технологии нейронных сетей практически не используются в нейромаркетинге, а изучение взаимосвязей психофизиологических показателей и состояний человека и метрик, распознаваемых машинным зрением, находятся на начальном этапе развития.
Из уровня техники известны следующие способы.
Патент №2711976 «СПОСОБ ДИСТАНЦИОННОГО РАСПОЗНАВАНИЯ И КОРРЕКЦИИ С ПОМОЩЬЮ ВИРТУАЛЬНОЙ РЕАЛЬНОСТИ ПСИХОЭМОЦИОНАЛЬНОГО СОСТОЯНИЯ ЧЕЛОВЕКА», Жовнерчук Инна Юрьевна (RU), 08.11.2018. Способ дистанционного распознавания и коррекции с помощью виртуальной реальности психоэмоционального состояния человека, в котором для распознавания психоэмоционального состояния используется индивидуальный динамический мониторинг мимики лица, движений и речи, при этом для определения мимических показателей, двигательной и речевой активности человеку предъявляют тестовый материал для воздействия на его рецепторное поле, затем по полученным данным определяют психоэмоциональное состояние человека в соответствии с системой кодирования лицевых движений, полученное мимическое изображение классифицируется системой искусственного интеллекта как аффективный компонент нарушения эмоций - по выраженности и длительности эмоциональных нарушений, определяемых как простая эмоция, настроение, аффект, по характеру эмоциональных нарушений - сниженное настроение, повышенное настроение, неустойчивая эмоциональная сфера, качественное искажение эмоций, по моторному компоненту аффективных нарушений - повышенная и сниженная двигательная активность, и идеаторному компоненту аффективных нарушений, определяемых по быстрой и медленной речи, и запоминается как база данных спектра эмоций индивидуального человека, после чего проводят дистанционный мониторинг с использованием искусственного интеллекта для постоянного сопоставления данных сокращения мимических мышц, двигательной и речевой активности со сформированной базой данных спектра эмоций человека, по полученным результатам выдаются рекомендации по возможности направления на коррекцию психофизиологического состояния, при этом коррекцию проводят посредством виртуальной реальности, вводящей человека в трансовое состояние, определяют форму коррекции как директивную или не директивную по индивидуальной программе, основанной на типе личности и преимущественной модальности восприятия информации - визуальной, аудиальной и кенестетической, при постоянном мониторинге энцефалографией, передающей данные искусственному интеллекту для определения эффективности коррекции.
Заявка на патент на изобретение №2016142499 СПОСОБ СЧИТЫВАНИЯ, РАСПОЗНАВАНИЯ И ФИКСАЦИИ ЭМОЦИОНАЛЬНЫХ СОСТОЯНИЙ ЛЮДЕЙ В ОПРЕДЕЛЕННОЙ, Общество с ограниченной ответственностью "ЭМОТИАН" (RU), Артамонова Яна Николаевна (RU), 28.10.2016. Способ считывания, распознавания и фиксации эмоциональных состояний людей в определенной геолокации, включающий в себя следующие этапы: а) сбор продукции пользователей по данным социальных сетей, включающий распознавание, идентификацию и форматирование данных; б) выделение параметров времени, геолокации продукции для каждого пользователя; в) сравнительный анализ продукции каждого пользователя с заранее сформированной библиотекой эмоционально-окрашенных слов и эмоционально-значимых символов, содержащей слова и символы, которые с высокой вероятностью встречаются в сочетании с упоминанием базовых эмоциональных состояний; г) фиксация профиля эмоциональности для конкретной продукции при идентификации слов из библиотеки в продукции пользователя; д) нормализация профиля об эмоциональном состоянии в течение выделенного времени по пользователю; е) усреднение данных продукции пользователя в течение заданного периода времени; ж) нормализация данных об эмоциональном состоянии по геолокации и формирование общего эмоционального фона - учет значений многих пользователей, в определенный момент времени, присутствующих в зоне геолокации; з) фиксация выделенного для определенного момента времени эмоционального состояния в геолокации, на карте.
Заявка на патент на изобретение №2017126805 СПОСОБ ОПРЕДЕЛЕНИЯ ЭМОЦИОНАЛЬНЫХ СОСТОЯНИЙ ЛЮДЕЙ В ОПРЕДЕЛЕННОЙ ГЕОЛОКАЦИИ С ПОМОЩЬЮ АППАРАТНОЙ ПЛАТФОРМЫ, Общество с ограниченной ответственностью "ЭМОТИАН", 26.07.2017. Способ определения эмоциональных состояний людей в определенной геолокации, включает в себя: оперативное выявление эмоции, характерные для данного географического места; оценивание эмоции и местоположение значимых групп; осуществление поиска геолокаций по требуемому уровню эмоционального фона; прогнозирование вероятности эмоционального состояния группы людей в зависимости от геолокации; формирование рекомендации по геолокациям, в которых вероятно изменение эмоционального состояния, отличающийся, применением аппаратной платформы.
Патент №2708807 АЛГОРИТМ КОМПЛЕКСНОГО ДИСТАНЦИОННОГО БЕСКОНТАКТНОГО МУЛЬТИКАНАЛЬНОГО АНАЛИЗА ПСИХОЭМОЦИОНАЛЬНОГО И ФИЗИОЛОГИЧЕСКОГО СОСТОЯНИЯ ОБЪЕКТА ПО АУДИО- И ВИДЕОКОНТЕНТУ, Плиев Георгий Игоревич (RU), 17.02.2017. Способ комплексного дистанционного бесконтактного мультиканального анализа психоэмоционального и физиологического состояния субъекта по аудио-видео данным, содержащим информацию о субъекте, отличающийся тем, что получение аудио-визуальных данных осуществляется непрерывно и динамически, а в качестве каналов исходных данных используют различные оптические каналы информации в сочетании с акустическим каналом информации.
Патент №2722447 СПОСОБ ОЦЕНКИ ПРОИЗВОЛЬНОГО ВНИМАНИЯ НА ОСНОВЕ ГЛАЗОДВИГАТЕЛЬНЫХ ПОКАЗАТЕЛЕЙ И АМПЛИТУДНО-ЧАСТОТНЫХ ХАРАКТЕРИСТИК ЭЛЕКТРОЭНЦЕФАЛОГРАММЫ, Акционерное общество "Нейротренд" (RU), Латанов А.В. И др. (RU), 14.11.2019. Способ оценки уровня произвольного внимания пользователя в процессе восприятия маркетингового объекта, заключающийся в том, что в процессе исследования регистрируют фоновую электроэнцефалограмму посредством регистрации значения потенциалов электроэнцефалограммы пользователя в течение заданного времени с закрытыми глазами и в течение заданного времени с открытыми глазами; предъявляют пользователю объекты; непрерывно определяют направление взора пользователя с обеспечением возможности определения фиксации взора пользователя на объекте; регистрируют значения потенциалов электроэнцефалограммы пользователя с обеспечением регистрации параметров волн энцефалограммы; по окончании исследования а) определяют начало фиксации взора пользователя на одном из объектов; б) определяют окончание фиксации взора пользователя на указанном объекте ранее чем через заранее установленное время, повторно выполняют операцию а); в) по окончании определения фиксации взора пользователя на объекте не ранее чем через заранее установленное время сохраняют значение времени фиксации пользователя на объекте и среднюю амплитуду волн альфа-активности, зарегистрированные от момента начала до момента завершения фиксации взора пользователя на указанном объекте с указанием объекта, относящегося к сохраненным параметрам; г) последовательно повторяют этапы от а) до в) до окончания времени, в течение которого осуществлялось исследование; д) для участков, соответствующих каждому из объектов в отдельности вычисляют суммарное время фиксаций взора на соответствующем объекте; вычисляют среднее значение от сохраненных значений амплитуд волн альфа-активности и определяют относительные уровни внимания для каждого из объектов, как частное от средней амплитуды альфа-волн, регистрируемых в соответствующий период фиксации и усредненного значения средних амплитуд альфа-волн, из которого вычитается единица, и полученная разность умножается на сто.
Патент №2723732 СПОСОБ АНАЛИЗА ЭМОЦИОНАЛЬНОГО ВОСПРИЯТИЯ АУДИОВИЗУАЛЬНОГО КОНТЕНТА У ГРУППЫ ПОЛЬЗОВАТЕЛЕЙ, Акционерное общество "Нейротренд" (RU), Королева М.В. и др., 23.10.2019 (RU). Способ анализа эмоционального восприятия аудиовизуального контента у группы пользователей, включающий этапы, на которых каждому пользователю из группы пользователей предъявляют на экране аудиовизуальный контент, во время просмотра которого пользователю проводят фотоплетизмографию и измерение реакции электропроводности кожи, определяют текущий средний показатель эмоциональной валентности за каждую секунду посредством вычисления разности амплитуд верхней и нижней огибающей фотоплетизмограммы, определяют текущий средний показатель эмоциональной вовлеченности за каждую секунду посредством вычисления суммы первой производной функции реакции электропроводности кожи и 40% от первой производной показателя эмоциональной валентности в соответствующую секунду, каждому пользователю из группы пользователей предъявляют тестовый стимул, представляющий собой звуковой сигнал длительностью 2 сек и громкостью 65 дБ, определяют тестовые показатели эмоциональной валентности и эмоциональной вовлеченности при предъявлении тестового стимула для каждого пользователя, нормируют текущие показатели эмоциональной валентности и эмоциональной вовлеченности во время просмотра аудиовизуального контента на тестовые показатели эмоциональной валентности и эмоциональной вовлеченности, сравнивают полученные нормированные средние показатели разных пользователей в группе пользователей и определяют групповые закономерности эмоционального восприятия аудиовизуального контента.
Патент №2287856 СПОСОБ ОБНАРУЖЕНИЯ ЭМОЦИЙ, СПОСОБ ГЕНЕРИРОВАНИЯ ЧУВСТВИТЕЛЬНОСТИ И СИСТЕМА И МАШИНОЧИТАЕМЫЙ НОСИТЕЛЬ ДЛЯ ИХ ОСУЩЕСТВЛЕНИЯ, А.Г.И. Инк. (JP), МИЦУЕСИ Синдзи (JP), 04.09.2001. Способ обнаружения эмоций для обнаружения эмоции человека, содержащий стадии ввода голосового сигнала; обнаружения интенсивности голоса и темпа, определяемого скоростью, с которой появляется голос, соответственно, и обнаружения в виде величины времени, интонации, которая отражает рисунок изменения интенсивности в каждом слове, выполняемом голосом, на основе введенного голосового сигнала; получения первой величины изменения, указывающей изменение интенсивности обнаруженного голоса в направлении оси времени, и второй величины изменения, указывающей изменение темпа голоса в направлении оси времени, и третьей величины изменения, указывающей изменение интонации голоса в направлении оси времени, соответственно; и генерирования сигналов, выражающих эмоциональное состояние по меньшей мере гнева, печали и удовольствия, соответственно, на основе указанных первой, второй и третьей величин изменения.
Заявка на патент на изобретение №2014138604 СПОСОБ УПРАВЛЕНИЯ ПОВЕДЕНИЕМ ЦЕЛЕВОЙ (ПОТРЕБИТЕЛЬСКОЙ) АУДИТОРИИ, Востряков Сергей Николаевич (RU), 25.09.2014. Способ управления поведением целевой (потребительской) аудитории, предусматривающий контроль движения, по меньшей мере, одного потребителя (покупателя) по предприятию торговли и/или сферы услуг при помощи устройства интеллектуального аудиовизуального оповещения и контроля целевой (потребительской) аудитории, демонстрацию рекламно-информационных материалов, доступных вниманию потребителя (покупателя), согласно данным, полученным от упомянутого устройства оповещения и контроля, отличающийся тем, что при помощи упомянутого устройства оповещения и контроля идентифицируют изменение характера движения потребителя (покупателя), и управляют демонстрацией рекламно-информационных материалов при указанной идентификации изменения характера движения потребителя (покупателя). Способ, описанный в последнем приведенным документе, по нашему мнению, является ближайшим аналогом заявляемого изобретения.
Несмотря на то, что имеются разработки в области прикладного применения способов оценки психологического и эмоционального состояния в сфере маркетинга товаров и услуг, разработка новых наиболее эффективных способов и инструментов нейромаркетинга для повышения конверсии предлагаемых продуктов является актуальной задачей. Существует потребность в способах, которые достоверно, эффективно и с минимальным набором технических инструментов будут обеспечивать оценку функционального состояния потребителей, с помощью которого можно определять мотивы, действия, механизм принятия решений потенциального потребителя, способы, которые позволят использовать эти данные для увеличения конверсии тех или иных продуктов компаний.
Задачей заявленного изобретения является разработка нового способа оценки функционального состояния людей и обеспечение практического применения способа в сфере продвижения товаров и услуг. Причем такого, который достоверно, эффективно и с минимальным набором технических инструментов позволит определять мотивы, действия, механизм принятия решений потенциального потребителя тех или иных компаний, реализующих товары или услуги, позволит увеличить конверсию предлагаемых ими продуктов, а также позволит прогнозировать потребительское поведение покупателей.
Технический результат предлагаемого изобретения состоит в расширении арсенала способов определения функционального состояния людей, увеличении положительных откликов пользователей при предложении им товаров и услуг, увеличение конверсии товаров и услуг, предлагаемых компаниями и/или предприятиями, реализующими товары или услуги, повышение точности прогнозирования потребительского поведения.
Указанный технический результат достигается тем, что в заявляемом способе предлагается следующее. Предлагается дистанционно определять функциональное состояние потенциальных потребителей (пользователей) товаров и услуг, в частности, по выявляемым паттернам походки пользователей (комплекс показателей: скорости и углы движений в крупных суставах в трех взаимно перпендикулярных плоскостях, осевые движения, траектории и амплитуды движений различных сегментов тела; а так же общие параметры походки - длина, база шага, угол разворота стопы, скорость ходьбы, частота шага, прямолинейность походки, боковые перемещения тела, и акселерометрические показатели - ускорений сегментов тела). Показатели движений пользователей, регистрируемые дистанционно, принимаются в качестве основных исходных анализируемых данных.
Среди наиболее разработанных и часто употребляемых понятий в психологии, в частности в психологии труда и эргономических исследованиях, стало понятие «функциональное состояние». Функциональное состояние - это характеристика нейрофизиологических механизмов, обеспечивающих согласованную активность психических, соматических и вегетативных функций в процессе деятельности или поведения человека (Машин В.А., 2011). Понятие функционального состояния вводится для характеристики эффективности деятельности или поведения человека. Иными словами, этот аспект рассмотрения проблем предполагает, прежде всего, решение вопроса о возможностях человека, находящегося в том или ином состоянии, выполнять конкретный вид деятельности.
Основное функциональное состояние человека - состояние психологической готовности к деятельности, характеризующееся мобилизацией, обеспечивающей эффективное выполнение определенной деятельности. (Павлова А.М., 2008). Также, можно обратить внимание на состояние покоя. Оно позволяет человеку накапливать ресурсы для последующей активной деятельности, провести осмысление получаемой информации. Однако, человеку свойственны и другие состояния, которые могут сказаться на эффективности его деятельности, повлиять на поведение и мотивацию. С точки зрения результативности их можно отнести к нежелательным, например, такие как состояние ожидания, тревоги, страха, апатии, утомления. При определении функциональных состояний целесообразно учитывать физиологические и психологические показатели. Физиологические методы дают возможность объективной диагностики состояния, соотнесения психологических явлений с органической основой. Ряд исследований показал, что обязательным проявлением нежелательных функциональных состояний и дезадаптации у здоровых лиц является вегетативный дисбаланс, проявляющийся высоким напряжением вагоинсуллярного и симпатоадреналового компонентов регуляторных систем (Бубнова А.Е., 2019). Вегетативная нервная система, выступающая в роли посредника между центральной нервной системой и внутренними органами, является важнейшим «органом выражения аффекта». С физиологической стороны развитие утомления свидетельствует о значительном сокращении внутренних резервов организма. Вследствие этого замедляется темп работы, нарушаются точность, ритмичность, координация движений, возрастает физиологическая стоимость работы, снижается сенсорная чувствительность, изменяется характер протекания психических процессов (сужается объем, нарушается переключение, распределение внимания, затрудняется извлечение информации из долговременной памяти, ухудшается эффективность процессов мышления).
Динамика вариабельности сердечного ритма выступает в качестве индикатора адаптационных возможностей организма. Ее исследование с использованием спектрального анализа является доступным неинвазивным, удобным в применении методом оценки функционального состояния (активности) вегетативной нервной системы, который может использоваться в условиях физических и психических нагрузок. Учитывая уровень возможного влияния проявлений функционального состояния на поведение человека, его действия, реакции, решения, для специалистов психологии труда, инженерной психологии, психофизиологии крайне интересны современные технологии определения состояния, и в первую очередь на основе дистанционных методов.
Одно из перспективных направлений сегодня - оценка характеристик походки человека. Как отечественными, так и зарубежными исследователями показано, что по движениям можно выявить заболевания опорно-двигательного аппарата, травмы, определить индивидуальные характеристики, позволяющие идентифицировать личность. Редкие исследования сформировали предпосылки к выявлению эмоций по жестам и мимическим изменениям. Поэтому, перспективным является разработка методов оценки функционального состояния по паттернам движений человека, в частности его походке.
Ходьба человека - это чрезвычайно сложный биомеханический процесс, который затрагивает все основные части и функции человеческого организма. Интерес к анализу ходьбы человека вытекает из того факта, что анализ движения дает информацию о процессах в организме человека, которые напрямую не наблюдаются.
Ходьба человека является результатом комплексного взаимодействия между многими нейромускулярными и скелетно-суставными элементами локомоторной системы, вегетативными и другими факторами. Нарушения в ходьбе могут быть результатом расстройств в любых частях этой системы, включая головной мозг, спинной мозг, нервы, мышцы, суставы, скелет, эндокринные железы. Другая возможная причина нарушений - наличие болевого синдрома, хотя физически человек в состоянии ходить нормально.
Изменение в траектории центра массы тела может указывать на изменения состояния человека, влияющие на поддержание стабильности в походке. Поскольку траектория изменения центра массы в процессе движения отражает движение всего тела, то анализ ее может предоставить полезные параметры для оценки ходьбы. (Катаев М.Ю., 2019).
Долгое время анализ походки применялся только для научных исследований и практическое применение его было незначительным. Широкое изучение движений стало возможным лишь с появлением компьютерных технологий. Методика оценки кинематики движений, основанная на использовании регистрирующей аппаратуры, в англоязычной литературе получила название «захват движения» (motion capture). Системы захвата движений могут быть магнитными (вычисляют положение и ориентацию датчиков движения с помощью магнитных полей и имеют низкую помехоустойчивость), оптическими (анализируют видеоизображения объекта) и инерционными (анализ биомеханики проводится путем получения сигналов с надетых на обследуемого сенсорных датчиков различных модальностей: гониометрических, инклинометрических, акселерометрических, силовых, датчиков растяжения и др.).
К кинематическим параметрам оценки движений, в частности, походки, можно отнести следующие: регистрация и измерение движений в крупных суставах нижней конечности как в сагиттальной плоскости, так и в трех взаимно перпендикулярных плоскостях, а также в суставах стопы. Также сюда можно отнести параметры, характеризующие пространственные движения таза, осевые движения голени и бедра, траектории и амплитуды движения различных сегментов тела, включая туловище, верхние конечности, голову. Также можно оценить общие параметры походки: длина, база шага, угол разворота стопы, скорость ходьбы, частота шага, прямолинейность походки, боковые перемещения тела при ходьбе, время двойного шага (период от контакта пятки с опорой до следующего контакта пяткой этой же ноги), время опоры и переноса каждой ноги, время опоры на обе ноги и одну ногу, момент и время опоры на различные отделы стопы.
Указанные показатели позволяют оценить степень функциональных изменений. На сегодня остаётся недостаточно изученным вопрос взаимосвязи поведенческих реакций и изменений походки в условиях различных негативных ФС. Учитывая прикладное значение прогнозирования поведенческих реакций человека в условиях различных функциональных состояний, определяемых по кинематике движений, экспериментальное выявление этой корреляции становится актуальной научно-практической задачей.
Таким образом, как уже указывалось выше, для дистанционной оценки функционального состояния потенциальных потребителей (пользователей) товаров и услуг, предлагается выявлять паттерны механизма их движений. Для этого в качестве основных исходных анализируемых данных дистанционно регистрируют показатели походки указанных пользователей - посетителей тех или иных компаний, при входе потенциального потребителя (пользователя) в помещение компании, которое может являться презентационным залом, торговым залом, операционно-кассовым залом и т.п. Посредством установленных в помещении видеокамер происходит регистрация и фиксирование показателей походки человека. В частности, регистрируются кинематические параметры походки, такие как: скорости и углы движений в крупных суставах в трех взаимно перпендикулярных плоскостях, осевые движения, траектории и амплитуды движений различных сегментов тела; дополнительно регистрируются - общие параметры походки - длина, база шага, угол разворота стопы, скорость ходьбы, частота шага, прямолинейность походки, боковые перемещения тела, и акселерометрические показатели - ускорений сегментов тела.
Итоговые паттерны включают все указанные выше параметры.
Необходимое и достаточное время для видеорегистрации параметров походки человека составляет примерно 3 секунды. Далее данные с видеокамер поступают в соответствующее программное обеспечение для обработки и анализа. При этом, указанное программное обеспечение по сути является предварительно обученной нейронной сетью, которая уже содержит данные о различных функциональных состояниях множества пользователей с уже установленной взаимосвязью и корреляциями между функциональным состоянием пользователя и его походкой, показателями биомеханики, а также зрительными реакциями на воспринимаемые элементы помещения. Также в нейронной сети уже имеются данные о взаимосвязи и корреляциях определённых функциональных состояний пользователей с конкретными вариантами рекламных продуктов той или иной компании.
Данные о походке (полученные с видеокамер на входе пользователя в зал) попадают в обученную нейросеть и сравниваются с имеющимися в ней данными. По этим данным сеть распознает функциональное состояния посетителя, которое наиболее соответствует ему в данный момент времени. Далее, в зависимости от распознанного варианта функционального состояния посетителя, нейронной сетью подбирается конкретный вариант рекламного продукта компании и(или) рекламного предложения компании, который в данный момент времени с наибольшей долей вероятности будет благоприятно воспринят пользователем, и(или) его дальнейшее потребительское поведение будет выражено в согласии воспользоваться предложенным продуктом или услугой.
Обучение нейронной сети происходит следующим образом. Предварительно происходит тестирование добровольцев, сбор данных для нейронной сети с целью выявления паттернов механики движений человека для разных функциональных состояний. Количество тестируемых добровольцев - не менее 1500 человек. Проводят комплексное обследование испытуемых и непрерывный мониторинг их функционального состояния следующими методами и по следующим параметрам:
- кардиоритмография со спектральным анализом вариабельности сердечного ритма;
- пупиллометрия (оценка реакции зрачка);
- психофизиологическое тестирование психических процессов внимания и памяти;
- оценка психологического состояния стандартизированными методиками;
- анкетирование (оценка качества жизни).
- сочетание ходьбы (индивидуально рассчитанной интенсивности) на беговой дорожке и выполнение когнитивных заданий с постепенным увеличением уровня сложности;
- гониометрия - измерение углов в суставах при выполнении регламентированных когнитивно-моторных заданий;
- видеорегистрация движений;
- оценка пространственных и временных характеристик движений;
- миография.
В ходе процедуры испытуемым предлагается выполнение когнитивно-моторных заданий, например, таких как ходьба на беговой дорожке и т.п. с целью формирования лёгкой и выраженной стадии утомления. Параллельно производят непрерывный съём показателей кардиоритмограммы, параметров движений, миограммы. Также происходит параллельная непрерывная регистрация движений на видеокамеру. По завершении процедуры нагрузки участник выполняет проход 20 метров в прямом направлении на предварительно зафиксированную видеокамеру. Таким образом, имеют пул данных выявленных паттернов механики движений во взаимосвязи и корреляции с различными функциональными состояниями пользователей. Далее, для набора следующего необходимого пула данных, проводят еще одно исследование. Оно заключается в следующем. Количество тестируемых добровольцев - не менее 1500 человек. Проводят комплексное обследование испытуемых и непрерывный мониторинг их функционального состояния следующими методами и по следующим параметрам:
- кардиоритмография со спектральным анализом вариабельности сердечного ритма;
- пупиллометрия (оценка реакции зрачка);
- психофизиологическое тестирование психических процессов внимания и памяти;
- оценка психологического состояния стандартизированными методиками;
- анкетирование (оценка качества жизни).
После регистрация фоновых значений функционального состояния, психофизиологических показателей, пупиллометрии, испытуемым демонстрируют предварительно подготовленные видео образы различных интерьеров помещений, являющимися презентационным залом, торговым залом, операционно-кассовым залом и т.п. Параллельно осуществляют непрерывный съём показателей кардиоритмограммы и электрической активности коры головного мозга. Также с помощью технологий айтрекинга (окулографии) производят регистрацию глазодвигательных реакций испытуемых в пространстве при предъявлении им видео образов различных интерьеров помещений. Таким образом, имеют пул данных по изменению функционального состояния пользователя во взаимосвязи и корреляции с глазодвигательными реакциями, полученными при восприятии образов-стимулов интерьера в лабораторных условиях. Далее проводят аналогичные исследования, но уже в реальных условиях, в реальном помещении компании. Например, если компанией, которая хочет увеличить конверсию своих продуктов является банк, то сбор информации происходит в реальном помещении банка, например, при вхоже в операционно-кассовый зал банка. В этой части исследования используются портативный носимый гаджет модифицированной версии АПК Айтрекера - очки с регистратором движений глаз и акселерометрическим модулем, и датчики АПК «Колибри-Кармин». Регистрация движений глаз начинается с входа в отделение помещение банка с улицы. Участнику исследования ставится задача войти в отделение, получить талон-номерок на услугу банка, проследовать мимо стоек специалистов на место ожидания, дождаться своей очереди. Помимо движений глаз, отслеживается траектория и скоростные характеристики перемещения участника по отделению банка для последующего изучения и выявления сочетаний активности психофизиологических реакций на участках пространства. Таким образом, имеют пул данных по изменению функционального состояния пользователя во взаимосвязи и корреляции с глазодвигательными реакциями, полученными при восприятии интерьера конкретного помещения в реальных условиях. Данные корреляции, учитывающие данные глазодвигательных реакций во взаимосвязи с функциональным состоянием участников, позволяют сформировать поправочные коэффициенты, которые могут быть использованы для более точного определения функционального состояния потенциальных пользователей товаров и услуг компаний.
В результате проведенных исследований, имеют вышеуказанные данные, которые используют для обучения нейронной сети известными в этой области способами. Таким образом, нейронная сеть, обученная таким образом, имеет данные о взаимосвязи и корреляциях определённых функциональных состояний пользователей с конкретными вариантами рекламных продуктов и(или) рекламных предложений той или иной компании, а также прогнозировании потребительского поведения с положительным ответом на тот или иной рекламный продукт компании. Далее, как уже указывалось выше, при получении данных походки пользователя с видеокамер на входе в зал, обученная нейронная сеть распознает функциональное состояния посетителя, которое наиболее соответствует ему в данный момент времени и подбирает конкретный вариант рекламного продукта компании, который в данный момент времени с наибольшей долей вероятности будет воспринят пользователем как положительный и(или) его дальнейшее потребительское поведение будет выражено в согласии воспользоваться предложенным продуктом или услугой. Такое наиболее подходящее рекламное предложение может быть выведено, например, на монитор, установленный в зале компании и который видит потенциальный конкретный потребитель. Также, возможно, что сообщение о выбранном наиболее подходящем рекламном продукте поступает сотруднику компании (оператору, менеджеру, продавцу, клерку) который осуществляет взаимодействие с клиентом, и далее сотрудник предлагает его непосредственно пользователю.
Способ подтверждается следующими примерами.
Пример 1. Применение Способа в системе банк-клиент.
По способу используется аппаратно-программный комплекс, состоящий из компьютера, видеокамеры, планшета и программного обеспечения с использованием технологии машинного обучения.
Практическая реализация способа в условиях банка состоит из двух этапов.
На первом этапе выполняется комплекс нейрофизиологических исследований. Исследования проводят на выборке здоровых добровольцев в количестве не менее 1500 человек. Проводится оценка взаимосвязи показателей походки человека (с использованием датчиков кинематики движений) и его функционального состояния. При этом у каждого участника исследования регистрируют следующие параметры. Кинематические параметры походки, такие как: скорости и углы движений в крупных суставах в трех взаимно перпендикулярных плоскостях, осевые движения, траектории и амплитуды движений различных сегментов тела; дополнительно регистрируются - общие параметры походки - длина, база шага, угол разворота стопы, скорость ходьбы, частота шага, прямолинейность походки, боковые перемещения тела, и акселерометрические показатели - ускорений сегментов тела. Параллельно производится непрерывный мониторинг функционального состояния участников исследования следующими методами и по следующим параметрам:
кардиоритмография со спектральным анализом вариабельности сердечного ритма, пупиллометрия (оценка реакции зрачка), психофизиологическое тестирование психических процессов внимания и памяти, оценка психологического состояния стандартизированными методиками, анкетирование (оценка качества жизни). Добровольцам предлагают также выполнить упражнения, которое заключается в ходьбе на беговой дорожке, а также выполнение когнитивно-моторных заданий с постепенным увеличением уровня сложности с целью формирования лёгкой и выраженной стадии утомления. Параллельно производят непрерывный съём показателей кардиоритмограммы, параметров движений, миограммы - для сбора данных о функциональном состоянии участников после применения «нагрузки». Параллельно производят регистрацию движений на видеокамеру. Массив выявленных паттернов биомеханики, соответствующих различным функциональным состояниям, структурируются и сохраняются в памяти аппаратно-программного комплекса. Далее проводят вторую часть исследования. У здоровых добровольцев в количестве не менее 1500 человек, регистрируют изменения функционального состояния при зрительном восприятии образов-стимулов интерьера филиала банка. Для этого добровольцам демонстрируют различные видео-образы интерьеров банка. Параллельно регистрируют параметры функционального состояния аналогично тому, как это проводили в исследовании на первом этапе, при этом, используя технологические решения айтрекинга, регистрируют также параметры глазодвигательных реакций участников. Полученные характеристики в форме параметрических коэффициентов изменения состояния человека в результате восприятии образов-стимулов интерьера филиала банка сохраняют в памяти аппаратно-программного комплекса. Далее проводится оценка отношения клиента к продуктам и услугам банка в условиях различных функциональных состояний. Полученные данные сохраняются в памяти аппаратно-программного комплекса в виде соответствий рекламных материалов различным функциональным состояниям.
Далее проводят дополнительное исследование на здоровых добровольцах в количестве не менее 20 человек, в условиях реального отделения банка. Для этого участнику надевают портативные очки для регистрации движений глаз, а также датчики для регистрации функционального состояния. Регистрация движений глаз начинается с входа в отделение банка с улицы. Участнику ставится задача войти в отделение, получить талон-номерок на услугу банка, проследовать мимо стоек специалистов на место ожидания, дождаться своей очереди. Помимо движений глаз, отслеживается траектория и скоростные характеристики перемещения участника по отделению банка, что регистрируется видеокамерами. Так выполняется сбор данных по выявлению психофизиологических реакций человека при предъявлении образов интерьера банка в условиях реального филиала банка. Полученные данные сохраняют в памяти аппаратно-программного комплекса. Результаты исследований в виде выявленных паттернов, алгоритмов, закономерностей и электронной базы данных интегрируются в нейронную сеть создаваемой системы дистанционной оценки функционального состояния посетителей банка.
Пример 2. Пользователь - потенциальный клиент банка, мужчина, 25 лет. Входит в помещение банка, операционно-кассовый зал. На входе в банк установлены видеокамеры, подключены к системе дистанционной оценки функционального состояния, которые осуществляют процесс видеосъемки того, как клиент входит в зал, перемещается по нему, это происходит примерно в течение около 3 секунд, регистрируют показатели походки клиента. Полученные данные поступают в программное обеспечение (обученную нейронную сеть), которая сопоставляет их с имеющимися в ее памяти паттернами кинематики движений и конвертирует данные в показатели функционального состояния, учитывая поправку по изменению функционального состояния клиента в связи с восприятием элементов интерьера филиала банка; анализирует итоговые значения, формируя при этом окончательный вывод о функциональном состоянии клиента в данный момент времени, подбирает индивидуальное рекламное предложение, которое наиболее соответствует его актуальному психофизиологическому и эмоциональному состоянию. «Наибольшее соответствие» означает, что при данном определенном функциональном состоянии, в данный момент времени, клиент с наибольшей долей вероятности воспримет это рекламное предложение как положительнее и(или) его дальнейшее потребительское поведение будет выражено в согласии воспользоваться предложенным продуктом или услугой. При подходе клиента к стойке оператора, указанное индивидуально выбранное рекламное предложение выводится на экран установленного планшета. Клиент знакомится с ним и принимает решение воспользоваться предложенной услугой.
Пример 3. На первом этапе, согласно последовательности действий, изложенной в описании Примера 1 выполняется комплекс нейрофизиологических исследований в установленном объёме. Порядок и суть исследований аналогичный тому, как описано в примере 1, с той разницей, что в качестве целевой локации рассматривается точечный магазин торговой сети, его интерьер и предлагаемые товары, и услуги. Все части исследований выполняются, как в условиях реальной ритейл-точки, так и в лабораторных условиях.
Пользователь - потенциальный потребитель товаров магазина, женщина, 37 лет. Входит в помещение торгового зала магазина. На входе в магазин установлены видеокамеры, подключены к системе дистанционной оценки функционального состояния, которые осуществляют процесс видеосъемки того, как клиент входит в помещение, перемещается по нему, это происходит примерно в течение около 3 секунд, регистрируют показатели походки клиента. Полученные данные поступают в программное обеспечение (обученную нейронную сеть), которая сопоставляет их с имеющимися в ее памяти паттернами кинематики движений и конвертирует данные в показатели функционального состояния, учитывая поправку по изменению функционального состояния клиента в связи с восприятием интерьера ритейл-точки, анализирует итоговые значения, формируя при этом окончательный вывод о функциональном состоянии клиента в данный момент времени, подбирает индивидуальное рекламное предложение, которое наиболее соответствует его актуальному психофизиологическому и эмоциональному состоянию. «Наибольшее соответствие» означает, что при данном определенном функциональном состоянии, в данный момент времени, клиент с наибольшей долей вероятности воспримет это рекламное предложение как положительнее и(или) его дальнейшее потребительское поведение будет выражено в согласии воспользоваться предложенным продуктом или услугой. При подходе покупателя к первым витринам / стендам / инсталляциям, указанное индивидуально выбранное рекламное предложение выводится на экран установленного рядом монитора. Клиент знакомится с ним и принимает решение воспользоваться предложенным товаром.
Пример 4. Применение Способа в информационных системах жилых домов.
Осуществляется та же последовательность действие, описанных в примерах 2 и 3 с той разницей, что видеокамеры регистрируют параметры походки посетителя при входе в парадную жилого дома, расчётная поправка на изменения функционального состояния происходит с учетом дистанции между входом и пространством расположения лифта, а наиболее подходящее индивидуально выбранное рекламное предложение выводится на экран установленного рядом монитора при подходе пользователя к лифту.
Разработанный заявляемый новый способ, основанный на оценке функционального состояния пользователей по показателям походки и/или кинематики, который достоверно, эффективно и с минимальным набором технических инструментов позволит определять мотивы, действия, механизм принятия решений потенциального потребителя тех или иных компаний, реализующих товары или услуги, и будет способствовать увеличению конверсии предлагаемых ими продуктов.
1. Способ оценки функционального состояния пользователя по показателям походки и/или кинематики движений, отличающийся тем, что осуществляют регистрацию показателей походки и/или кинематики движений, таких как кинематические параметры походки: скорости и углы движений в крупных суставах в трёх взаимно перпендикулярных плоскостях, осевые движения, траектории и амплитуды движений различных сегментов тела; причём дополнительно могут быть зарегистрированы следующие: общие параметры походки - длина, база шага, угол разворота стопы, скорость ходьбы, частота шага, прямолинейность походки, боковые перемещения тела, и акселерометрические показатели - ускорения сегментов тела по меньшей мере одного пользователя при посещении компании, по полученным показателям с помощью обученной нейронной сети определяют функциональное состояние пользователя, в том числе, но не ограничиваясь, в данный момент времени и предлагают пользователю рекламное предложение и/или рекламный продукт, наиболее соответствующие этому определённому функциональному состоянию, такое, которое с наибольшей долей вероятности будет воспринято пользователем как положительное, и/или его дальнейшее потребительское поведение с наибольшей долей вероятности будет выражено в согласии воспользоваться предложенным продуктом или услугой, при этом для обучения нейросети используют следующее: регистрируют данные показателей походки и/или кинематики движений добровольцев и параллельно регистрируют показатели их функционального состояния, таким образом формируют базу данных выявленных паттернов механики и кинематики движений во взаимосвязи и корреляции с различными функциональными состояниями пользователей, регистрируют показатели функционального состояния добровольцев, параллельно демонстрируя им видеообразы интерьеров помещений, параллельно производят регистрацию глазодвигательных реакций, таким образом формируют базу данных по изменению функционального состояния пользователя во взаимосвязи и корреляции с глазодвигательными реакциями, полученными при восприятии образов-стимулов интерьера помещений, с помощью которой получают поправочные коэффициенты, которые используют для более точного определения функционального состояния пользователей;
2. Способ по п. 1, отличающийся тем, что регистрацию показателей походки и/или кинематики движений при входе пользователя в помещение компании осуществляют посредством установленных стационарных видеокамер;
3. Способ по п. 1, отличающийся тем, что его используют для увеличения конверсии предлагаемых товаров и услуг компании;
4. Способ по пп 1-3, отличающийся тем, что компанией является банк, помещением является операционно-кассовый зал или зал банка, а видеообразы интерьеров помещений, указанные в п.1, являются видеообразами интерьера банка;
5. Способ по пп. 1-3, отличающийся тем, что компанией является предприятие, реализующее товары или услуги.
