Human Interaction with virtual objects in Augmented & Virtual realities

Vitaliy Tymchyshyn

Software engineer at Samsung R&D Institute Ukraine (SRK)
Junior researcher at Synergetics department at Bogolyubov Institute for Theoretical Physics(Ukraine)
Курс відео-лекцій

Одними з захопливих можливостей, що надають нам сучасні коп'ютерні технології, є доповнена (augmented) та віртуальна (virtual) реальності.

Навряд чи хтось ще не чув про Oculus Rift, Samsung Gear VR, Microsoft HoloLens, Valve Index або Google Glass.

Проте попри шалений розвиток, багато дуже цікавих завдань в цій області все ще залишаються відкритими, зокрема задача взаємодії з віртуальними об'єктами за допомогою рук.

На сьогодні багато компаній намагаються розвивати відповідні технології, що зрозуміло, адже погодьтесь, куди цікавіше не просто спостерігати віртуальний світ, а й доторкнутись до нього руками: пересунути віртуальний кубик, натиснути кнопку...

В цій лекції я розповім які бувають підходи до розпізнавання позиції рук у просторі, а також як отримують якісний набір даних (dataset) на прикладі відомих датасетів BH22M та FPHA (адже якісний датасет ━ це, мабуть, вісімдесят відсотків успіху) та як векторний добуток допомагає нам відрізнити ліву руку від правої