Американские разработчики создали алгоритм, который по отражению света от монитора воссоздает исходное видео. Статья с описанием разработки будет представлена на конференции NIPS 2019, сообщает N+1.
При воспроизведении видео на проекторе свет от него падает на стены и создает на них изменения яркости и тени. Фредо Дюранд (Fredo Durand) и его коллеги из Массачусетского технологического института создали алгоритм, который позволяет не проводить каждый раз сложную калибровку оборудования и при этом получать достаточно качественный (в сравнении с подобными алгоритмами) ролик по видеозаписи изменения света и цвета на других объектах.
На опубликованном исследователями ролике можно видеть, что нейросеть хорошо справляется с простыми ситуациями, например, когда человек жонглирует большими мячами. В случае, если она сталкивается с цветными роликами, на которых содержится больше деталей, результаты получаются менее впечатляющими, однако даже в таком случае в целом алгоритм справляется со своей задачей.
Контекст
В октябре стало известно о создании российскими учёными технологии дистанционного мониторинга эмоций человека. Создатели использовали нейросети: алгоритмы смогли определить и проанализировать эмоции, пульс, частоту дыхательных движений и жестикуляцию людей
