Российский стартап разработал сервис по распознаванию пульса по видео и аудио

Компания Neurodata Lab продает эту технологию крупному бизнесу: банкам, страховым компаниям, телекоммуникационным операторам, ритейлерам и научным лабораториям. Сервис может анализировать эмоции клиентов по их мимике и движениям — сравнивая статистику по разным магазинам платформа может предлагать различные улучшения.

Платформа работает на технологиях компьютерного зрения и искусственного интеллекта. Система оценивает кадры и анализирует метрики по выражению лица, движению глаз, позе, голосу, речи, жестам. После этого Neurodata Lab предлагает свое видение того, что чувствует человек в режиме реального времени.

Оценка пульса происходит также по видеоролику. Для этого нейросеть выделяет из видео лицо и шею человека, после чего алгоритмы анализируют пиксели в выбранной области — их движение и изменение цвета. Эти значения можно связать с насыщенностью крови кислородом и расширением капилляров — по этим данным и вычисляют пульс. Сейчас технология измеряет пульс с погрешностью два удара в минуту.



Подобные технологии также можно использовать для анализа поведения водителей такси, отмечают разработчики.

Источник