Mask R-CNN を用いたアイカメラ映像解析手法の提案

抄録

近年，日本の農業においては，農業就業人口の減少と高齢化により，新規就農者が熟練営農者から直接指導を受ける機会が減少している．それに伴い，農作業マニュアルの整備がより一層重要となっている．しかし，従来の農作業マニュアルは，文章や画像のみで構成されるものが多く，経験の少ない新規就農者に取って直感的に理解することが難しかった．そこで本研究グループではこれまで，アイカメラを用いたWEBベースの農作業技術継承マニュアルを提案してきたが，それには作成の負担が大きいという問題点があった．そこで本研究ではこれら問題点を解決するために，Mask R-CNN(Mask Region-with Convolution Neural Network)とアイカメラを用いて，アイカメラで撮影した映像に対してその人が何を見ているかという注釈情報を付加した動画を作成するシステムの作成を行った．被験者実験を行い評価を行った結果，このシステムを使用することにより，熟練就農者に農作業の意図のヒアリングするというレトロスペクティブ法の問題点である，質問者の負担を解決することができると考える．