画像電子学会誌
Online ISSN : 1348-0316
Print ISSN : 0285-9831
ISSN-L : 0285-9831
論文
3D仮想眼鏡試着のためのリアルタイム眼鏡取替映像生成法
小林 巧杉浦 裕太斎藤 英雄上間 裕二
著者情報
ジャーナル フリー

2020 年 49 巻 2 号 p. 119-127

詳細
抄録

本論文では,ユーザー自身が矯正眼鏡を着用した状態のままでも利用可能な新しい仮想眼鏡試着の映像生成手法を提案する.研究背景として,眼鏡店を訪れる消費者は鏡を使って試着用の眼鏡が自分に似合っているかどうか試すが,視力が悪いために矯正眼鏡を掛けた状態でないと鏡に映った自身の様子を確認できないというジレンマが存在する.スマートフォンのカメラで撮影したユーザーの顔画像に仮想的に眼鏡を掛けた映像を生成するアプリケーションも存在するが,それらほぼ全てのシステムは眼鏡を外した顔の画像または動画を撮影して仮想眼鏡を重畳することを前提としているため,視力の悪いユーザーが画面をはっきりと見ることができないという課題は解決されていない.そこで本手法では,カメラで撮影した動画中の実眼鏡領域を本人の皮膚テクスチャで上書きすることで消去し,さらに別の仮想眼鏡を重畳した複合現実感映像を生成する.これにより,眼鏡試着における障壁を取り除くことが可能な3次元仮想試着を実現する.また,ユーザーの顔の動きに合わせてリアルタイムに3D仮想眼鏡を表示するために,高精度で高速に顔追跡可能な顔解析ツールを応用する.さらに,矯正レンズの歪みによる変化と光の屈折・反射も考慮して仮想レンズを描画することで,通常の試着用眼鏡では確認できないようなより実際の眼鏡を掛けた状態に近い映像を生成することが可能となる.実験を通して,眼鏡を掛けた状態のままでも違和感の生じない試着映像がリアルタイムで生成されたことを示し,その有効性を確認する.

著者関連情報
© 2020 一般社団法人 画像電子学会
前の記事 次の記事
feedback
Top