Теперь люди могут прогнозировать потенциальные изменения в обстановке, об этом сообщили исследователи Университета Кюсю (Япония). После формируются определённые решения и ставятся действия. По этой системе собираются данные о том, в каком положении находится мебель, предметы интерьера, люди, роботы в обстановке и отображаются всевозможные сценарии. Через VR/AR происходит трансляция этих сценариев пользователям.
Собирать данные учёным помогали определённые датчики: отслеживающие траектории пересечения объектов или роботов оптические трекеры и камера RGB-D, которая наблюдала за активностью человека. Полученные материалы отправляли в симулятор динамики и планировщик движений. Такие элементы данной системы разрешили ей сделать прогноз изменений в конкретной обстановке, и появилась возможность синтезировать образы будущих событий.
Как итог люди, использовавшие систему просматривали результаты этого моделирования в виде синтезированных изображений благодаря AR- дисплей или просто через VR. Все изменения укладывались поверх текущей картинки.
Из исследования стало известно, что такая система является очень удобной, поскольку происходит прямое взаимодействие человека с роботизированной техникой. Происходит безопасное сосуществование робота и человека, при котором демонстрируются для нас возможные опасные ситуации.