Ученые позволят роботам интерпретировать невербальную коммуникацию. Исследователи робототехники в школе информатики Карнеги — Меллон разработали метод отслеживания поз нескольких человек в режиме реального времени, который позволяет устройствам контролировать и интерпретировать язык человеческого тела.
Новая технология, названная OpenPose, была выпущена как открытый исходный код на Github. Она заполняет пробел между текстовой и звуковой коммуникацией между человеком и машинами.
Исследователи говорят, что это позволит роботам лучше чувствовать то, что делают люди вокруг них, как они настроены, и можно ли их прервать.
OpenPose позволяет компьютерам понять позы тела нескольких человек; интерпретация отдельных поз тела не достаточна, чтобы понять невербальную коммуникацию групп, особенно больших.
Она может также обнаружить движения рук и расположение отдельных пальцев человека, функция, которая, как говорят исследователи, позволит разработчикам создать новые способы взаимодействия с компьютерами посредством жестов.
Образцы OpenPose включают в самоходные автомобили для контроля того, собираются ли люди выйти на дорогу, чтобы избежать столкновения с ними. OpenPose может также использоваться, чтобы диагностировать и реабилитировать аутизм, дислексию и депрессию.
Исследователи использовали старый панорамный студийный купол с 500 видеокамерами и датчиком движения Kinect Microsoft внутри, чтобы разрабоатать OpenPose.
Для отображения движения рук исследователи использовали только 31 камеру с высоким разрешением, но все же смогли собрать большой набор данных с захваченными изображениями.
OpenPose в настоящее время интерпретирует человеческие формы только в двух размерах, но исследователи надеются скоро двинуться в три измерения.
