Видеть пульс человека по видео

На днях вышла статья Eulerian Video Magnification for Revealing Subtle Changes in the World ^[1] представителей MIT и Cambridge, в которой они показывают технологию усиления небольших периодических изменений изображения на видео. Благодаря ей можно, например, четко видеть поток крови в лице человека по видео:

Технология позволяет отслеживать не только изменения цвета, но и положения предметов и открывает интересные новые возможности дополненной реальности, особенно если будет интегрирована с Google Glasses.

Авторы сделали отличный ролик, приоткрывающий схему работы алгоритма и возможные применения:

Главные особенности алгоритма:

• Работа в реальном времени.
• Усиление только периодичных изменений изображения. Эффективная частота — примерно от .5 до 10 Гц, зависит от камеры.
• Возможность выбора конкретной частоты для усиления.
• Не используются feature tracking или optical flow, не делается предположений о характере изменений — алгоритм более общий, изображение обрабатывается как единое целое.
• Система чувствительна к шуму, однако, сглаживание позволяет добиться хороших результатов.

Применения, которые очевидны уже сейчас:

• Слежение за дыханием маленького ребенка во время сна.
• Измерение пульса пациента в клинике или дома за считанные секунды и без контакта. (Похоже, уже делают ^[2]).
• Игра в покер :)
• Интересно будет проанализировать видео известных политиков и выявить корелляцию с правдивостью и х речей.
• Ну и конечно, все разновидности стартапов «Instagram for Video» будут рады включить это себе в фильтры.

А как бы вы применили эту технологию?

Автор: ashtuchkin