Updated on 2026/04/28

Research Interests

  • Augmented Reality

  • Near-eye Display

  • Head-mounted displays

  • Human Augmentation

  • Vision Augmentation

  • Reality-Oriented Computing

Research Areas

  • Informatics / Perceptual information processing

Education

  • Technical University of Munich   Department of Informatics

    2013.4 - 2016.3

    　 More details

    Country： Germany

    researchmap

  • Tokyo Institute of Technology   Graduate School of Information Science and Engineering

    2008.4 - 2011.3

    　 More details

    Country： Japan

    Notes： Ms. Eng.

    researchmap

  • Technische Universität München   Exchange study

    2008.8 - 2009.7

    　 More details

    Country： Germany

    researchmap

  • Tokyo Institute of Technology   School of Engineering   Department of Computer Science

    2004.4 - 2008.3

    　 More details

    Country： Japan

    Notes： B. Eng.

    researchmap

Research History

  • Institute of Science Tokyo   Department of Computer Science, School of Computing   Associate Professor

    2025.10

    　 More details

    Country：Japan

    researchmap

  • MITSUBISHI Electric Corp.   Technical Advisor

    2024.4 - 2025.3

    　 More details

    Country：Japan

    researchmap

  • Tokyo Institute of Technology   School of Computing   Part-time Lecturer

    2023.4 - 2024.9

    　 More details

    Country：Japan

    researchmap

  • Keio University   Faculty of Science and Technology   Visiting Assistant Professor

    2021.4

    　 More details

    Country：Japan

    Notes：Sugimoto Lab.

    researchmap

  • The University of Tokyo   Interfaculty Initiative in Information Studies   Project Associate Professor

    2021.4 - 2025.9

    　 More details

    Country：Japan

    Notes：Rekimoto Lab

    researchmap

  • Tokyo Institute of Technology   School of Computing   Visiting Associate Professor

    2021.4 - 2023.3

    　 More details

    Country：Japan

    researchmap

  • Riken AIP   High-dimensional Statistical Modeling Unit   Visiting Researcher

    2018.4 - 2023.3

    　 More details

    Country：Japan

    researchmap

  • Japan Science and Technology Agency (JST)   JST PRESTO   Concurrent Researcher

    2017.12 - 2021.9

    　 More details

    Country：Japan

    Notes：The Future of Humans and Interactions

    researchmap

  • Tokyo Institute of Technology   School of Computing   Assistant Professor

    2017.12 - 2021.3

    　 More details

    Country：Japan

    Notes：Tenure-track/JSPS LEADER Fellowship

    researchmap

  • Keio University   Faculty of Science and Technology   Visiting Assistant Professor

    2017.10 - 2021.3

    　 More details

    Country：Japan

    Notes：Sugimoto Lab.

    researchmap

  • JST   JST PRESTO   Researcher

    2017.10 - 2017.11

    　 More details

    Country：Japan

    Notes：The Future of Humans and Interactions

    researchmap

  • Riken AIP   High-dimensional Statistical Modeling Unit   Visiting Researcher

    2017.6 - 2017.12

    　 More details

    Country：Japan

    researchmap

  • Keio University   Faculty of Science and Technology   Project Assistant Professor

    2016.4 - 2017.9

    　 More details

    Country：Japan

    Notes：Sugimoto Lab.

    researchmap

  • Technische Universität München   Department of Computer Science   Researcher

    2013.4 - 2016.3

    　 More details

    Country：Germany

    Notes：Fachgebiet Augmented Reality, Prof. Klinker

    researchmap

  • Toshiba Corp. Research and Development Center   Multimedia Lab., Interactive Media Lab.   Researcher

    2011.4 - 2013.3

    　 More details

    Country：Japan

    researchmap

▼display all

Papers

▼display all

MISC

  • IEEE VR 2024 Message from the Program Chairs and Guest Editors.

    Yuta Itoh 0001, Voicu Popescu, Tabitha C. Peck, Stefanie Zollmann

    IEEE Trans. Vis. Comput. Graph.   30 ( 5 )   2024.5

    　More details

  • IEEE VR 2024 Message from the Program Chairs.

    Yuta Itoh 0001, Voicu Popescu, Tabitha C. Peck, Stefanie Zollmann

    VR   2024

    　More details

  • Mouth Shape Recognition by Embedded Optical Sensors in Head-Mounted Display by Automated Labeling Method of Training Data Using Vowel Recognition

    Nakamura Fumihiko, Suzuki Katsuhiro, Masai Katsutoshi, Itoh Yuta, Sugiura Yuta, Sugimoto Maki

    Transactions of the Virtual Reality Society of Japan   22 ( 4 )   523 - 534   2017

    　More details

    Language：Japanese   Publisher：THE VIRTUAL REALITY SOCIETY OF JAPAN  

    <p>Facial occlusions caused by HMD (Head-Mounted Display) make capturing user's face hard. In this paper, we propose a technique to classify the mouth shapes into 6 classes using optical sensors embedded in HMD and give labels to training dataset by vowel recognition. We conducted an experiment with 5 subjects to compare recognition rates of machine learning in manual labeling and automated labeling conditions. The result shows that proposed method achieved an average of 99.9% classification accuracy in the manual labeling condition, and of 96.3% classification accuracy in the automated labeling condition.</p>

    DOI： 10.18974/tvrsj.22.4_523

    J-GLOBAL

    researchmap

  • AffectiveHMD: Facial Expression Recognition and Mapping to Virtual Avatar Using Embedded Photo Sensors

    Suzuki Katsuhiro, Nakamura Fumihiko, Otsuka Jiu, Masai Katsutoshi, Itoh Yuta, Sugiura Yuta, Sugimoto Maki

    Transactions of the Virtual Reality Society of Japan   22 ( 3 )   379 - 389   2017

    　More details

    Language：Japanese   Publisher：THE VIRTUAL REALITY SOCIETY OF JAPAN  

    <p>The head-mounted displays (HMD) allow people to enjoy immersive VR experience. A virtual avatar can be the representative of a user in the virtual environment. However, the expression of the virtual avatar with a HMD user is constrained. A major problem of wearing an HMD is that a large portion of one's face is occluded, making facial recognition difficult in an HMD-based virtual environment. To overcome this problem, we propose a facial expression mapping technology using retro-reflective photoelectric sensors. The sensors attached inside the HMD measures the distance between sensors and a face. The distance values of five basic facial expressions (Neutral, Happy, Angry, Surprised, and Sad) are used for training the neural network to estimate the facial expression of a user. Our system can also reproduce facial expression change in real-time through an existing avatar by using regression.</p>

    DOI： 10.18974/tvrsj.22.3_379

    J-GLOBAL

    researchmap

  • Classification of Mouth Shape Using Optical Sensor Attatched to Head-Mounted Display

    中村文彦, 鈴木克洋, 正井克俊, 伊藤勇太, 杉浦裕太, 杉本麻樹

    電子情報通信学会技術研究報告   116 ( 245(MVE2016 11-17) )   2016

    　More details

  • Facial Expression Recognition for a State of Wearing Head Mounted Display by Embedded Optical Sensors

    鈴木克洋, 中村文彦, 正井克俊, 伊藤勇太, 杉浦裕太, 杉本麻樹

    電子情報通信学会技術研究報告   116 ( 245(MVE2016 11-17) )   2016

    　More details

  • A Density Ratio Approach to Two-Sample Test (コンピュータビジョンとイメージメディア(CVIM)) -- (テーマセッション)

    SUGIYAMA Masashi, Suzuki Taiji, Itoh Yuta

    情報処理学会研究報告   2010 ( 3 )   8p   2010.10

    　More details

    Language：English   Publisher：情報処理学会  

    researchmap

  • A Density Ratio Approach to Two-Sample Test

    SUGIYAMA Masashi, SUZUKI Taiji, ITOH Yuta, KANAMORI Takafumi, KIMURA Manabu

    IEICE technical report   110 ( 188 )   149 - 156   2010.8

    　More details

    Language：English   Publisher：The Institute of Electronics, Information and Communication Engineers  

    The goal of the two-sample test (a.k.a. the homogeneity test) is, given two sets of samples, to judge whether the probability distributions behind the samples are the same or not. In this paper, we propose a novel non-parametric method of two-sample test based on a least-squares density ratio estimator. Through various experiments, we show that the proposed method overall produces smaller type-II error (i.e., the rate of judging the two distributions to be the same when they are actually different) than a state-of-the-art method, with slightly larger type-I error (i.e., the rate of judging the two distributions to be different when they are actually the same).

    CiNii Books

    researchmap

  • A Density Ratio Approach to Two-Sample Test

    SUGIYAMA Masashi, SUZUKI Taiji, ITOH Yuta, KANAMORI Takafumi, KIMURA Manabu

    IEICE technical report   110 ( 187 )   149 - 156   2010.8

    　More details

    Language：English   Publisher：The Institute of Electronics, Information and Communication Engineers  

    The goal of the two-sample test (a.k.a. the homogeneity test) is, given two sets of samples, to judge whether the probability distributions behind the samples are the same or not. In this paper, we propose a novel non-parametric method of two-sample test based on a least-squares density ratio estimator. Through various experiments, we show that the proposed method overall produces smaller type-II error (i.e., the rate of judging the two distributions to be the same when they are actually different) than a state-of-the-art method, with slightly larger type-I error (i.e., the rate of judging the two distributions to be different when they are actually the same).

    CiNii Books

    researchmap

▼display all

Industrial property rights

  • 拡張現実ディスプレイ、ビューアおよびプロジェクタ

    伊藤 勇太, カーン アクシット, 神之門 拓己

    　More details

    Applicant：国立大学法人東京工業大学

    Application no：特願2021-051323  Date applied：2021.3

    Announcement no：特開2022-149260  Date announced：2022.10

    J-GLOBAL

    researchmap

  • ディスプレイ装置

    伊藤 勇太, トビアス ラングロッツ

    　More details

    Applicant：国立大学法人東京工業大学

    Application no：特願2019-050959  Date applied：2019.3

    Announcement no：特開2020-154075  Date announced：2020.9

    J-GLOBAL

    researchmap

  • 光学式シースルー型ディスプレイ

    伊藤 勇太, 浜崎 巧

    　More details

    Applicant：国立大学法人東京工業大学

    Application no：特願2019-050960  Date applied：2019.3

    Announcement no：特開2022-078364  Date announced：2022.5

    J-GLOBAL

    researchmap

  • 同定装置

    伊藤 聡, 下山 賢一, 関 晃仁, 伊藤 勇太, 山崎 雅起

    　More details

    Applicant：株式会社東芝

    Application no：特願2017-014340  Date applied：2017.1

    Announcement no：特開2017-098268  Date announced：2017.6

    J-GLOBAL

    researchmap

  • 計測支援装置、方法及びプログラム

    伊藤 勇太, 関 晃仁, 伊藤 聡, 山崎 雅起, 内山 英昭

    　More details

    Applicant：株式会社東芝

    Application no：特願2013-195736  Date applied：2013.9

    Announcement no：特開2015-059914  Date announced：2015.3

    J-GLOBAL

    researchmap

  • 計測支援装置、方法及びプログラム

    伊藤 勇太, 関 晃仁, 伊藤 聡, 山崎 雅起, 内山 英昭

    　More details

    Applicant：株式会社東芝

    Application no：特願2013-195736  Date applied：2013.9

    Announcement no：特開2015-059914  Date announced：2015.3

    Patent/Registration no：特許第6096626号  Date registered：2017.2 

    J-GLOBAL

    researchmap

  • 計測装置、方法及びプログラム

    内山 英昭, 伊藤 勇太, 関 晃仁, 岡田 隆三

    　More details

    Applicant：株式会社東芝

    Application no：特願2013-182511  Date applied：2013.9

    Announcement no：特開2015-049200  Date announced：2015.3

    J-GLOBAL

    researchmap

  • 計測装置、方法及びプログラム

    山崎 雅起, 関 晃仁, 伊藤 聡, 伊藤 勇太, 内山 英昭, 岡田 隆三

    　More details

    Applicant：株式会社東芝

    Application no：特願2013-062977  Date applied：2013.3

    Announcement no：特開2014-186010  Date announced：2014.10

    J-GLOBAL

    researchmap

  • 計測装置、方法及びプログラム

    山崎 雅起, 関 晃仁, 伊藤 聡, 伊藤 勇太, 内山 英昭, 岡田 隆三

    　More details

    Applicant：株式会社東芝

    Application no：特願2013-062977  Date applied：2013.3

    Announcement no：特開2014-186010  Date announced：2014.10

    Patent/Registration no：特許第6104662号  Date registered：2017.3 

    J-GLOBAL

    researchmap

  • 計測装置、方法及びプログラム

    関 晃仁, 伊藤 聡, 伊藤 勇太, 山崎 雅起, 内山 英昭

    　More details

    Applicant：株式会社東芝

    Application no：特願2013-062740  Date applied：2013.3

    Announcement no：特開2014-186004  Date announced：2014.10

    J-GLOBAL

    researchmap

  • 計測装置

    伊藤 聡, 関 晃仁, 山崎 雅起, 伊藤 勇太, 内山 英昭

    　More details

    Applicant：株式会社東芝

    Application no：特願2013-062546  Date applied：2013.3

    Announcement no：特開2014-185996  Date announced：2014.10

    J-GLOBAL

    researchmap

  • 3次元モデル生成装置

    下山 賢一, 関 晃仁, 伊藤 聡, 山崎 雅起, 伊藤 勇太

    　More details

    Applicant：株式会社東芝

    Application no：特願2012-249859  Date applied：2012.11

    Announcement no：特開2014-098603  Date announced：2014.5

    J-GLOBAL

    researchmap

  • 計測装置、方法及びプログラム

    伊藤 勇太, 関 晃仁, 下山 賢一, 伊藤 聡, 山崎 雅起

    　More details

    Applicant：株式会社東芝

    Application no：特願2012-250460  Date applied：2012.11

    Announcement no：特開2014-098625  Date announced：2014.5

    Patent/Registration no：特許第6214867号  Date registered：2017.9 

    J-GLOBAL

    researchmap

  • 計測装置、方法及びプログラム

    伊藤 勇太, 関 晃仁, 下山 賢一, 伊藤 聡, 山崎 雅起

    　More details

    Applicant：株式会社東芝

    Application no：特願2012-250460  Date applied：2012.11

    Announcement no：特開2014-098625  Date announced：2014.5

    J-GLOBAL

    researchmap

  • 同定装置、方法及びプログラム

    伊藤 聡, 下山 賢一, 関 晃仁, 伊藤 勇太, 山崎 雅起

    　More details

    Applicant：株式会社東芝

    Application no：特願2012-231669  Date applied：2012.10

    Announcement no：特開2014-086149  Date announced：2014.5

    J-GLOBAL

    researchmap

  • 領域特定装置、方法、及びプログラム

    山崎 雅起, 関 晃仁, 下山 賢一, 伊藤 聡, 伊藤 勇太, 岡田 隆三

    　More details

    Applicant：株式会社東芝

    Application no：特願2012-194414  Date applied：2012.9

    Announcement no：特開2014-048276  Date announced：2014.3

    J-GLOBAL

    researchmap

  • 領域特定装置、方法、及びプログラム

    山崎 雅起, 関 晃仁, 下山 賢一, 伊藤 聡, 伊藤 勇太, 岡田 隆三

    　More details

    Applicant：株式会社東芝

    Application no：特願2012-194414  Date applied：2012.9

    Announcement no：特開2014-048276  Date announced：2014.3

    Patent/Registration no：特許第5740370号  Date registered：2015.5 

    J-GLOBAL

    researchmap

  • 観測支援装置、観測支援方法およびプログラム

    下山 賢一, 関 晃仁, 伊藤 聡, 山崎 雅起, 伊藤 勇太, 岡田 隆三

    　More details

    Applicant：株式会社東芝

    Application no：特願2012-176664  Date applied：2012.8

    Announcement no：特開2014-035272  Date announced：2014.2

    J-GLOBAL

    researchmap

  • 観測支援装置、観測支援方法およびプログラム

    下山 賢一, 関 晃仁, 伊藤 聡, 山崎 雅起, 伊藤 勇太, 岡田 隆三

    　More details

    Applicant：株式会社東芝

    Application no：特願2012-176664  Date applied：2012.8

    Announcement no：特開2014-035272  Date announced：2014.2

    Patent/Registration no：特許第5638578号  Date registered：2014.10 

    J-GLOBAL

    researchmap

  • 計測装置、方法、及びプログラム

    伊藤 勇太, 関 晃仁, 下山 賢一, 伊藤 聡, 山崎 雅起

    　More details

    Applicant：株式会社東芝

    Application no：特願2012-148658  Date applied：2012.7

    Announcement no：特開2014-010111  Date announced：2014.1

    J-GLOBAL

    researchmap

  • 計測支援装置、方法及びプログラム

    伊藤 聡, 関 晃仁, 伊藤 勇太, 山崎 雅起, 下山 賢一

    　More details

    Applicant：株式会社東芝

    Application no：特願2012-145885  Date applied：2012.6

    Announcement no：特開2014-010559  Date announced：2014.1

    Patent/Registration no：特許第5571128号  Date registered：2014.7 

    J-GLOBAL

    researchmap

  • 計測支援装置、方法及びプログラム

    伊藤 聡, 関 晃仁, 伊藤 勇太, 山崎 雅起, 下山 賢一

    　More details

    Applicant：株式会社東芝

    Application no：特願2012-145885  Date applied：2012.6

    Announcement no：特開2014-010559  Date announced：2014.1

    J-GLOBAL

    researchmap

▼display all

Research Projects

  • 視覚モダリティ変調による控えめな拡張現実感視覚ガイダンスの研究

    Grant number：24KK0187  2024.9 - 2027.3

    日本学術振興会  科学研究費助成事業  国際共同研究加速基金(海外連携研究)

    伊藤 勇太

    　 More details

    Grant amount：\20930000 （ Direct Cost: \16100000 、 Indirect Cost：\4830000 ）

    researchmap

  • ホログラム受光系と映像光ビーミングによる薄型・軽量な拡張現実感メガネの提案

    Grant number：23K28120  2024.2 - 2026.3

    日本学術振興会  科学研究費助成事業  基盤研究(B)

    伊藤 勇太

    　 More details

    Grant amount：\11960000 （ Direct Cost: \9200000 、 Indirect Cost：\2760000 ）

    researchmap

  • Proposal for thin and lightweight augmented reality glasses with a hologram receiving optics and image beaming

    Grant number：23H03430  2023.4 - 2026.3

    Japan Society for the Promotion of Science  Grants-in-Aid for Scientific Research  Grant-in-Aid for Scientific Research (B)

    　 More details

    Grant amount：\18720000 （ Direct Cost: \14400000 、 Indirect Cost：\4320000 ）

    researchmap

  • A Proposal for Distributed Beaming Displays to Resolve Trade-offs in AR Displays

    Grant number：21K19788  2021.7 - 2023.3

    Japan Society for the Promotion of Science  Grants-in-Aid for Scientific Research Grant-in-Aid for Challenging Research (Exploratory)  Grant-in-Aid for Challenging Research (Exploratory)

    　 More details

    Grant amount：\6370000 （ Direct Cost: \4900000 、 Indirect Cost：\1470000 ）

    researchmap

  • 人間機械融合視覚による質感認識能力拡張

    Grant number：20H05958  2020.11 - 2025.3

    日本学術振興会  科学研究費助成事業 学術変革領域研究(A)  学術変革領域研究(A)

    岩井 大輔, 伊藤 勇太

    　 More details

    Grant amount：\101140000 （ Direct Cost: \77800000 、 Indirect Cost：\23340000 ）

    本年度は、（１）実物反射光から、直接・間接反射成分を分離し、それを人の視界に直接与えることのできる、質感分離スコープの性能向上と、（２）光学シースルーディスプレイに光線の加算減算を可能とする光変調眼鏡の構築と、「陰影」や「焦点ボケ」の再現といった新規な質感提示技術の構築を、当初の目標としていた。
    （研究項目１）質感分離スコープでは、複数枚の空間高周波パタン画像を対象に照射し、直接照射していない箇所のみを透過させる空間遮蔽マスクを通してそれを観察することで、間接反射成分のみを観察することができる。昨年度構築したシステムでは、透過型液晶を用いて直接反射成分を空間的にブロックする仕組みとしていたが、特に視線方向に装置が長大になってしまうという欠点があった。そこで、反射型液晶であるLCoS (liquid crystal on silicon) を用いて光路を折り畳めるようにすることで、装置のスリム化に成功した。また、照射パタンと透過パタンとの位置ずれにより縞模様のアーチファクトが視認されるという問題があったが、光学系を再設計して位置ずれを改善することに成功した。また、分離に必要となるパタン数を少なくする研究を行い、最小で2枚のチェッカパタンを投影するだけで間接反射成分を観測可能であることを明らかとした。
    （研究項目２）加算減算可能な光学シースルーディスプレイを構築し、新規な質感提示アプローチとして「陰影」を忠実に再現する技術を開発した。実験により、実物からの影を重畳する仮想物体に反映することや、仮想物体からの影を実物に重畳させることにも成功した。

    researchmap

  • Wearable ophthalmology measurement and light modulation for flexible control of vision

    Grant number：20H04222  2020.4 - 2023.3

    Japan Society for the Promotion of Science  Grants-in-Aid for Scientific Research Grant-in-Aid for Scientific Research (B)  Grant-in-Aid for Scientific Research (B)

    Itoh Yuta

    　 More details

    Grant amount：\17680000 （ Direct Cost: \13600000 、 Indirect Cost：\4080000 ）

    The main results of the research are divided into two sections. ■The first is the estimation of the focal distance and aberration of the eye and the visibility of the field of view using wavefront measurement. AR display technology combining a retinal projection display and a wavefront measurement sensor was developed, and experiments were conducted to evaluate depth perception in rendering according to depth of field. ■The second is image optimisation using spatial light modulation and its linkage with vision. A new AR display method, StainedView, was proposed and spatial light modulation technology was applied to construct an optical see-through optical shielding system, successfully reproducing continuous depth optically. In the final year, a compact optical shielding system using photochromic and holographic materials was constructed and presented as a conference paper in IEEE VR 2023.

    researchmap

  • Development of Occlusion-Capable Retinal-Scanning Optical See-Through Head-Mounted Display with Depth Scanning

    Grant number：17K19985  2017.6 - 2020.3

    Japan Society for the Promotion of Science  Grants-in-Aid for Scientific Research Grant-in-Aid for Challenging Research (Exploratory)  Grant-in-Aid for Challenging Research (Exploratory)

    Itoh Yuta

    　 More details

    Grant amount：\6370000 （ Direct Cost: \4900000 、 Indirect Cost：\1470000 ）

    Optical see-through head-mounted displays (OST-HMD) are used for augmented reality (AR) technology that integrates virtual objects into the real world by superimposing images directly on the wearer's field of view. In this study, we have realized an OST-HMD system with optical occlusion that is free from perceptual deficiencies and overflowing of the displayed image. We have developed a miniaturized OST-HMD that produces perceptually consistent occlusion by combining a depth-range and retina-scanning OST-HMD with a transmissive liquid crystal display (LCD) using an integrated rangefinder laser projector.

    researchmap

  • Advancement of Vision Augmentation via Optical See-Through Head-Mounted Displays and Vision-Adaptive Image Processing

    Grant number：17H04692  2017.4 - 2021.3

    Japan Society for the Promotion of Science  Grants-in-Aid for Scientific Research Grant-in-Aid for Young Scientists (A)  Grant-in-Aid for Young Scientists (A)

    Itoh Yuta

    　 More details

    Grant amount：\24310000 （ Direct Cost: \18700000 、 Indirect Cost：\5610000 ）

    We have made the following major achievements toward the realization of visual augmentation technology using augmented reality (AR) with optical see-through HMDs.
    # A new spatial image projection technology using a Beaming Projector (Achievement 1).# New image presentation technology using color subtraction (2, 3, 15). # A new spatial calibration method using deep learning that takes into account the viewpoint position.(10). # Comprehensive survey papers and tutorials on spatial calibration methods(6,13). # Research on depth perception of retinal projection images(8). # Glasses that correct colors according to the color vision characteristics(Achievement 9). # Glasses that can be programmed to a specific power (4) # A new AR image expression method to realize HDR(4). # A new AR image expression method to realize HDR（5）# See-through HMD to realize optical cloaking in combination with the background（7)

    researchmap

  • 光学シースルー頭部搭載型ディスプレイと視覚適応画像処理による視覚拡張技術の確立

    Grant number：16H07169  2016.8 - 2018.3

    日本学術振興会  科学研究費助成事業 研究活動スタート支援  研究活動スタート支援

    伊藤 勇太

    　 More details

    Grant amount：\2990000 （ Direct Cost: \2300000 、 Indirect Cost：\690000 ）

    光学シースルーHMD（OST-HMD）を用いて人間の視覚機能を制御・強化する、視覚拡張 (Vison Augmentation) 技術の実現に向けて、今年度は下記の進捗があった。
    【視覚特性の推定】について、装着型HMDでの使用を視野に入れた、眼球の焦点距離すなわち注視点の奥行きを推定する手法を検討した。光点から出た光が眼球内部で反射する第4次Purkinje反射、その位置が焦点距離と相関することを用いた推定手法を提案し、装着型視線追跡カメラを用いたシステムを実装した。その結果15~45㎝の視点距離において、約3.15㎝の平均誤差での焦点距離推定が行えた。本システムの利点は、既存の大型の計測機器と異なり、個々人を継続的に計測できることにある。
    【視覚特性適応画像処理】について、人の輝度調節機能を補助する視覚拡張手法を提案した。OST-HMDと遮蔽LCDパネルを組み合わせたシステムを構築した。一人称カメラで計測した視野画像から、ユーザーの視野において露出過多・不足の領域を推定し、眼に入る光量を本システムによって低減・増幅する。実験では露出過多・不足領域が25%・50％低減し、視点における画像のダイナミックレンジを制御できることを示した。
    【超高精度空間校正手法】について、各種HMDにて実行可能な赤外眼球画像向け３D視線追跡プログラムを実装し一般公開した。本プログラムは単眼の眼球近接赤外カメラで実行可能であり、本研究課題において汎用的に利用可能なソフトウェア資源となる。
    <BR>
    なお本研究課題は平成29年度より17H04692若手研究(A)へと昇華・統合し、視覚拡張技術の発展へ向けて研究を継続する。

    researchmap

▼display all