【職務内容】
ソナー・IRカメラ・RGBカメラ等のマルチモーダルなセンサ情報から対象を認識・識別し、障害物回避や追従といった機体制御へのフィードバックまでを一貫して担う、海上・海中向けの認識・判断ソフトウェアを開発していただきます。
Jetson Orin Nano等の限られた計算資源上で動作するAIモデルを、量子化・プルーニング・TensorRT等で軽量化・最適化し、実機に搭載するところまで責任を持っていただきます。認識結果はROS 2ベースの自律航行ソフトウェアスタックに統合し、認識から行動生成までをエンドツーエンドで設計・開発するポジションです。
また、海洋環境のセンサデータは公開データセットがほとんど存在しないため、モデルの性能はデータセットの質と量に大きく左右されます。実海域試験や実運用で得られるソナー・IR・RGBデータを収集・蓄積・アノテーションし、モデルの学習・評価へ継続的に還流させるデータ収集基盤のアーキテクチャ設計（機体側のロギング設計、データパイプライン、データセット管理を含む）も、本ポジションの重要なミッションです。

【ポジションの魅力・得られる経験】
ソナー・IR・RGBという複数モダリティのセンサ情報を統合するマルチモーダルAIを、認識から機体制御まで一気通貫で設計・実装できる
Jetson等の限られた計算資源上でAIモデルを実機に載せ切るという、エッジAI実装の醍醐味を存分に味わえる
研究開発フェーズのAIを、実際にAUVに搭載して海で動かすところまで、開発から実証までを自分の手で完結できる
世の中に存在しない海洋マルチモーダルデータセットを、収集基盤の設計からデータセット構築まで自らの手で立ち上げられる
※ご応募の際は、これまでに携わった開発・制作内容が分かるポートフォリオのご提出を可能な範囲でお願いいたします。