深層学習による動画像超解像処理の1方法

抄録

動画像の超解像処理を効果的に行うためには、動画をフレームごとの2次元情報ではなく、時間軸方向の情報も含めた時空間情報として処理するべきである。これまで提案されている深層学習による動画像超解像処理では、静止画における超解像処理をもとにした2次元畳み込みを基本としており、その処理にフレーム間の変化に関する処理を追加した構成となっている。動画像をこのように空間と時間軸とでそれぞれ分けて処理するのではなく、時空間情報として総合的に処理することで、より柔軟で効果的な処理が期待できる。本研究では、時空間情報を3次元畳み込みによる深層学習によって処理する動画像超解像処理を提案する。