APPLIED PERCEPTION ENGINEERING Laboratory
応用知覚工学研究室
応用知覚工学研究室
Our research lies at the intersection of human perception, affective computing, and immersive technology. We study perceptual conflict and illusion as windows into affective experience, combining psychophysics, physiological signal processing, computer vision, and AI to understand how the body responds when perception is challenged or deceived. Our work informs the design of smarter, more human-aware VR/XR systems and AI applications.
We investigate how the human perceptual system responds when sensory signals conflict, with particular focus on visuo-haptic mismatch and the uncanny valley in virtual environments. We use psychophysical methods and physiological measurement (HRV, GSR, EMG, pupil dilation) to quantify these responses and identify the thresholds at which perceptual conflict becomes affectively significant.
We develop and evaluate computational methods for recognizing emotional and affective states from physiological and behavioral signals, including remote photoplethysmography (rPPG) and facial/body analysis using deep learning.
We translate findings from our perceptual and affective research into design knowledge for VR/XR systems and educational technology, to address questions such as when perceptual conflict disrupts presence, how affect-aware systems can respond to learner state, and what physiological signatures reliably indicate meaningful experience.
感情コンピューティングと知覚に関する研究を通じて,人間の心や感覚の仕組みを解明することを目的.脳波や心拍などの生体信号やカメラ映像用いて,現実世界およびVR空間における感情の変化を科学的に分析.機械学習や深層学習の技術も積極的に活用.知覚の研究では,とくに錯視に注目し,人がどのように世界を【見ている・感じている】のか,その仕組みを明らかにする.そのために,刺激と感覚の関係を定量的に測定する心理物理学(Psychophysics)の手法を使用.これらの研究成果は,より自然で快適なVR空間やAIシステムの設計に貢献するとともに,建築,教育,医療など幅広い分野への応用が期待される.
研究室紹介ビデオ(芝浦工業大学の研究室探訪授業用)https://youtu.be/axlzTu6vMJA
Keyword:
Affective Computing · Perceptual Conflict · Visuo-haptic Illusion · Uncanny Valley · Physiological Signal Processing · Remote Photoplethysmography (rPPG) · Computer Vision · Deep Learning · VR/XR · Psychophysics
感情コンピューティング · 知覚的葛藤 · 視触覚錯覚 · 不気味の谷 · 生体信号処理 · 遠隔脈波計測(rPPG) · コンピュータビジョン · 深層学習 · VR/XR · 心理物理学
We welcome students from all backgrounds, including those with no prior experience in our research area. What matters most is your curiosity and enthusiasm for learning. We provide a supportive, hands-on environment where you can build real skills and grow as a researcher.
Our lab celebrates diversity and the unique perspectives each person brings. We are guided by open-mindedness, collaboration, and a genuine commitment to each other's growth. We believe great research happens when people from different backgrounds think together.
Our working language is English, making the lab accessible to international students. The professor also speaks Japanese, so Japanese students are welcome to communicate in either language, and many find it a natural opportunity to strengthen their English through daily discussions and research activities.
We are actively recruiting students interested in VR, human perception, physiological signal processing, or machine learning. If you want to work at the intersection of immersive technology and human psychology, we would love to hear from you!
We are currently accepting applications from:
Undergraduate students (Research-based international program: IGP)
Master's students (Graduate School of Engineering and Science, Electrical Engineering and Computer Science Course)
Doctoral students (Graduate School of Engineering and Science, Functional Control Systems Course)
Short-term research/internship students from partner universities (2 months to 1 year)
Research students preparing to enter SIT graduate school, particularly recommended for students with limited background or no prior experience in this field
To apply or learn more, please contact the supervisor directly by email.
研究室へようこそ
私たちの研究室では、これまでの経験の有無を問わず、あらゆるバックグラウンドを持つ学生を歓迎しています。最も大切にしているのは、学びへの好奇心と研究への意欲です。知識やスキルを着実に伸ばしていけるよう、丁寧なサポート体制を整えています。
本研究室は多様性を尊重し、一人ひとりが持つ独自の視点を大切にしています。オープンマインド、好奇心、そして互いの成長への真摯なコミットメントを研究室文化の基盤としています。異なるバックグラウンドを持つ人々が共に考えることで、優れた研究が生まれると信じています。
研究室での主な使用言語は英語(発表資料・論文等)であり、留学生も円滑に研究・協働できる環境です。指導教員は日本語も話せるため、日本人学生は英語・日本語のどちらでも希望に応じてコミュニケーションが可能です。日常的なディスカッションや研究活動を通して、英語でのコミュニケーション能力を自然に高められる機会にもなっています。
【研究室メンバー募集】VR・人間知覚・生体信号処理・機械学習に興味のある学生を積極的に募集しています。没入型テクノロジーと人間の心理の交差点で研究したい方、ぜひご連絡ください。現在受け入れ中の学生:
学部生(芝浦工業大学 工学部 卒業研究)
修士課程学生(大学院理工学研究科 修士課程 電気電子情報工学系)
博士課程学生(大学院理工学研究科 博士課程 機能制御システム専攻)
短期研究生・インターンシップ学生(協定校の学生対象、2か月から1年)
研究生(大学院入学準備を目的とする方。本専攻の専門知識が限られている方や未経験の方にも推奨)
出願や詳細については、指導教員まで直接メールでお問い合わせください。
Shibaura Institute of Technology, Toyosu campus
Main building, 11F (IGP Area)
Email: peeraya<at>shibaura-it.ac.jp