2023年3月卒業庭山耕平
運河周辺における船の音のうるささを軽減する船舶接近情報システム構築のために、機械学習を使って環境音と映像から船舶の航行を検出する手法を提案しました。これまでの船舶検出法にはノイズに弱いという弱点がありました。環境音と映像を組み合わせて船舶検出をすることでノイズを含む環境における船舶検出性能を向上させました。
音や画像、テキストなど異なる種類の情報を組み合わせて学習する機械学習手法をマルチモーダル学習といいます。本研究では運河の環境音と映像を用いてマルチモーダル船舶検出を行うことで、音または映像にノイズが入ってしまっても、もう片方のモーダル情報を活用して船舶検出を行うことでノイズ環境における船舶検出性能を向上させました。
音響工学や機械学習に関する知識を深めることができました。また、多くの学会発表を経験することで苦手に感じていたプレゼンテーション能力を高めることができ、自信をつけることができました。研究を進めながら、社会人として役立つ力を鍛えることができる場所だと思います。
|
環境音と映像を用いたマルチモーダル船舶検出