ソナー・IRカメラ・RGBカメラ等のマルチモーダルなセンサ情報から対象を認識・識別し、障害物回避や追従といった機体制御へのフィードバックまでを一貫して担う、海上・海中向けの認識・判断ソフトウェアを開発していただきます。
Jetson Orin Nano等の限られた計算資源上で動作するAIモデルを、量子化・プルーニング・TensorRT等で軽量化・最適化し、実機に搭載するところまで責任を持っていただきます。認識結果はROS 2ベースの自律航行ソフトウェアスタックに統合し、認識から行動生成までをエンドツーエンドで設計・開発するポジションです。
また、海洋環境のセンサデータは公開データセットがほとんど存在しないため、モデルの性能はデータセットの質と量に大きく左右されます。実海域試験や実運用で得られるソナー・IR・RGBデータを収集・蓄積・アノテーションし、モデルの学習・評価へ継続的に還流させるデータ収集基盤のアーキテクチャ設計(機体側のロギング設計、データパイプライン、データセット管理を含む)も、本ポジションの重要なミッションです。
- ソナー・IR・RGBという複数モダリティのセンサ情報を統合するマルチモーダルAIを、認識から機体制御まで一気通貫で設計・実装できる
- Jetson等の限られた計算資源上でAIモデルを実機に載せ切るという、エッジAI実装の醍醐味を存分に味わえる
- 研究開発フェーズのAIを、実際にAUVに搭載して海で動かすところまで、開発から実証までを自分の手で完結できる
- 世の中に存在しない海洋マルチモーダルデータセットを、収集基盤の設計からデータセット構築まで自らの手で立ち上げられる
※ご応募の際は、これまでに携わった開発・制作内容が分かるポートフォリオのご提出を可能な範囲でお願いいたします。
提出形式例:
- GitHubやGoogle Drive、ウェブサイト等のURLは、「リンク」欄へご記載ください
- PDF・PowerPoint等のファイルは、「その他ファイル」欄へアップロードしてください
※まずはカジュアル面談をご希望の場合、下記フォームからご登録ください
https://herp.careers/v1/bluearch/U2ZawE0HAcFy?token=cd4AfZEws0_V1dLlE7ZY9