Physical AIエンジニア(VLM・VLA)
ugo株式会社
想定年収
600万円 ~ 1,200万円
勤務地
東京都
従業員数
85名
仕事内容
(ポジション概要)
Physical AIと呼ばれる「VLM(大規模視覚言語モデル)」「VLA(大規模視覚言語行動モデル)」といった視覚と言語と行動を結びつけたマルチモーダルな次世代AIモデルを開発し、当社の「ugo Pro」や新開発のロボットに適用していきます。
以下の3つの開発領域で、AI技術を「実世界の物理的な動き」に繋げる技術開発に取り組んでいただきます:
①エッジAIによる物体検知: エッジデバイスでのYOLO物体検出のリアルタイム推論
②模倣学習(ugo Pro R&D): LeRobotフレームワークを用いたヒューマノイドロボットugo Proの模倣学習と行動生成
③強化学習: NVIDIA Isaac Labを用いた4足歩行ロボットTerraの強化学習とシミュレーション
カメラ画像から警備・点検現場での異常を検知するモデルの実装とエッジ側へのデプロイ、そして「AIを積んだだけ」ではなく、それがどうユーザーへの価値を提供できるかフィードバックを受けながら開発に取り組んでいただきます。
(具体的仕事内容)
AIロボット向けのロボット基盤モデル開発、ファインチューニング、AIモデルのトレーニング、そしてエッジデプロイを担当していただきます。あなたの興味や専門性に応じて、以下の3つの開発領域から担当領域を選択できます。
1. エッジAI
・YOLOv7-tinyなどの物体検出モデルのエッジデバイスへのデプロイ
・量子化によるモデル最適化
・C++20によるエッジデバイス向け推論エンジンの開発
・カメラ画像からの点検対象認識(計器読み取り、異常検知等)
2.模倣学習(ugo Pro R&D)
・LeRobot frameworkを用いたヒューマノイドロボットugo Proの模倣学習
・Diffusion Policy、ACT(Action Chunking Transformer)などのアルゴリズム実装
・VLM(大規模視覚言語モデル)・VLA(大規模視覚言語行動モデル)の開発・ファインチューニング
・Zarr、Safetensorsなどを用いた大規模データセット管理
3. 強化学習
・NVIDIA Isaac Lab、Isaac Simを用いた4足歩行ロボットの強化学習
・不整地認識、段差昇降の強化学習による制御ポリシー開発
・シミュレーション環境構築と物理シミュレーション
・Weights & Biasesを用いた学習進捗の可視化
■共通業務
・モデル訓練など大規模データセットのデータパイプライン構築
・開発したAIモデルの評価と安全性向上
・AIモデルとロボット制御システムの統合(行動フィードバックループの開発)
・フィールドテストおよび技術検証
・他部門との技術調整、要件定義のサポート
(開発環境)
■OS・インフラ
・OS:Linux (Ubuntu 22.04)
・インフラ:AWS, GPU環境(学習用)
・その他:Docker, GitHub Actions, AWS Copilot CLI
■使用言語・技術スタック
1.エッジAI
・言語:C++, Python
・モデル:YOLOv7-tiny (INT8量子化)
・画像処理:OpenCV
・最適化:INT8量子化, OpenMP並列化
・通信:NATS Pub/Sub, JSON, GStreamer
2.模倣学習(ugo Pro R&D)
・言語:Python
・フレームワーク:PyTorch, LeRobot (Hugging Face)
・アルゴリズム:Diffusion Policy, ACT (Action Chunking Transformer)など
・Physical AI:VLM (Vision-Language Models), VLA (Vision-Language-Action Models)
・通信:gRPC / Protocol Buffers
3. 強化学習
・言語:Python
・フレームワーク:PyTorch, RSL RL (PPO)
・シミュレーター:NVIDIA Isaac Lab, Isaac Sim
・学習手法:教師-生徒蒸留学習 (Distillation), Actor-Critic
●共通技術
・画像処理:OpenCV, PIL
・モデル最適化:ONNX, TensorRT
■開発ツール
・バージョン管理:Git (Git flow)
・コミュニケーション:Slack, Notion
・AI支援開発:Claude Code, Codex
仕事内容変更範囲
会社の指示する業務
職位
ー
募集背景
(技術的な魅力)
Physical AI - AIを実世界の物理的な動きに繋げる
3つの開発領域で最先端技術に挑戦
①エッジAI(AI Toolbox)
・エッジデバイスでのリアルタイム物体検出
・INT8量子化、OpenMP並列化などの最適化技術を駆使
・ロボットに搭載されたエッジデバイスで動作する実用的なAIシステムの構築
②模倣学習(ugo Pro R&D)
・LeRobot frameworkを用いたヒューマノイドロボットugo Proの模倣学習
・VLM/VLAという最先端のマルチモーダルAI技術をロボットに実装
・人間のデモンストレーションからロボットが学習する新しい学習手法の開発
③強化学習
・NVIDIA Isaac Lab、Isaac Simを用いた4足歩行ロボットTerraの強化学習
・不整地認識、段差昇降など、実世界の複雑な環境でのロボット制御の実現
・シミュレーションから実機への転移学習(Sim-to-Real)
●共通の魅力
・「AIを積んだだけ」ではなく、ロボットの挙動にフィードバックされるループ開発
・実機での検証機会が豊富で、実際のロボットが学習して動く様子を目の当たりにできる
・あなたの興味や専門性に応じて、3つの開発領域から選択・組み合わせて開発できる
募集人数
1人
応募条件
技能/経験
(必須条件)
・Pythonを実務で使用した経験(目安:3年以上)
・Linuxの利用経験(目安:3年以上)
・画像認識、物体検出、セグメンテーションのいずれかの実装経験
(歓迎条件)
■エッジAI関連
・PyTorchまたはTensorFlowを用いた機械学習モデルの開発経験
・YOLOv7-tiny, YOLOv8等のYOLOシリーズの使用経験
・INT8量子化、モデル圧縮、プルーニングの経験
・NVIDIA Jetson等のエッジデバイスへのデプロイ経験
・TensorRT, ONNX Runtimeを用いたモデル最適化経験
・OpenMP, CUDA等の並列化・高速化技術の経験
・NATS, gRPC等のメッセージング・通信プロトコルの実装経験
■模倣学習(ugo Pro R&D)関連
・VLM(Vision-Language Models)、VLA(Vision-Language-Action Models)の開発・ファインチューニング経験
・模倣学習(Imitation Learning)の実装経験
・LeRobot framework, Hugging Face Transformersの使用経験
・Diffusion Policy, ACT (Action Chunking Transformer)等のアルゴリズム実装経験
■強化学習関連
・強化学習(Reinforcement Learning)の実装経験
・PPO (Proximal Policy Optimization)等のRLアルゴリズムの実装経験
・NVIDIA Isaac Lab, Isaac Simを用いたシミュレーション開発経験
・教師-生徒蒸留学習(Distillation)の実装経験
・URDFを用いたロボットモデリング経験
■共通スキル
・大規模データセットの前処理・モデル構築・評価・デプロイに至る一連のプロセスをリードした経験
・ROS/ROS 2を用いたロボット開発経験
・SLAM/Navigation、センサー処理、アーム制御のいずれかのご経験
・商用レベルのロバスト性を実現するための技術洗練スキル(製品化追込みスキル)
・Git flowワークフローなどを用いた開発経験
・技術ロードマップの策定や技術選定の経験
学歴
不問
職務経験
要
業界経験
要
年齢
年齢制限不問
英語力
その他語学力
語学力詳細
ー
勤務条件
雇用形態
無期雇用
試用期間
有り(3ヶ月)
給与
年俸制
年収:600万円 ~ 1,200万円
月収:50万円~100万円
月額基本給:37万円~
賞与・インセンティブ
※年俸制の為支給なし
昇給
有り 年1回 / 4月
勤務地
東京都
(東京本社)
東京都千代田区東神田1-7-8
※都営新宿線「岩本町」JR「馬喰横山」から徒歩5分
勤務地変更範囲
出向
就業時間
10:00~19:00
休憩時間:60分
残業:月30時間~45時間程度
固定(定額)残業代制
フレックスタイム制(コアタイム:11:00-16:00)
残業手当
定額の残業代+通常の残業代
固定残業時間 45時間 / 月
固定残業代 125,438円 / 月
固定残業時間超過分は別途支給されます。
通勤手当
交通費:全額支給
その他手当
休日・休暇
完全週休二日制, 土, 日, 祝日, 夏季休暇, 年末年始
年間休日:125
年間有給休暇:有給休暇は入社時から付与されます
( 有給休暇年間20日一斉付与
入社初年度に限り分割付与 )
社会保険
雇用保険, 健康保険, 労災保険, 厚生年金
福利厚生
書籍購入支援制度
受動喫煙対策
就業場所 全面禁煙
備考
ー
選考内容
選考プロセス
適性試験:有り 、 面接回数:2回~3回
求人No.:NJB2336711
最終更新日:2026/7/23
企業情報
企業名
ugo株式会社
代表者名
代表取締役CEO 松井 健
設立
2018年2月
従業員数
85名
資本金
100,000,000円
本社所在地
〒101-0031 東京都千代田区東神田1-7-8 プライム東神田ビル8F
株式公開
日系・外資
日系
企業URL
https://ugo.plus/
事業内容
1. ugoソリューションの提供・運用
2. RaaSフレームワークの開発・提供・運用
事業に関する特色
■企業紹介
【業務DXロボット「ugoシリーズ」を社会実装する国産ロボットメーカー。現場で得られるデータを活かし、フィジカルAIと次世代ロボットの開発にも挑戦】
当社は国産ロボットメーカーとして、警備・点検・案内などの業務DXを実現するロボット 「ugoシリーズ(ugo Pro、ugo mini)」 の開発・製造・社会実装を推進するとともに、複数のロボットを統合管理するプラットフォーム 「ugo Platform」 を提供しています。
人とロボットの協働モデルと環境データの収集・分析によって、従来の労働集約型の日常業務を最適化し、少ない労働力で成り立つ運用システムを構築します。
また現在は、既存ロボットの社会実装で得られた現場データや運用ノウハウを活かし、フィジカルAIの開発や多脚ロボットなど次世代ロボットの研究開発にも取り組んでいます。
■プロダクト
【業務DXロボット「ugoシリーズ」】
ugo Pro、ugo mini を中心とするugoシリーズは、遠隔操作とAIによる自動化を組み合わせることで、警備・点検・案内など様々な業務を行うことができます。
遠隔操作ロボットと完全自動ロボット双方の利点を併せ持つことで、現場にフィットした柔軟な運用を可能にします。
また、ロボットの運用を支える 「ugo Platform」 によって、複数ロボットの管理やデータ活用を行い、ロボットを活用した業務DXを実現します。
■業種別 DXソリューション
ugoは、警備・点検・案内といった業務領域において、ロボットを現場にインテグレーションするDXソリューションを提供しています。
ロボットを単体の製品として導入するのではなく、業務設計・運用・遠隔操作を含めて現場のオペレーションに組み込み、実際に稼働する形で社会実装を進めています。
ugo株式会社は、人とロボティクスの融合で、新しい社会システムを構築し、新しい価値観を創造します。
会社の特色
■導入時事例
・アイリスオーヤマの新型清掃ロボットに『ugo Platform』技術が採用
https://prtimes.jp/main/html/rd/p/000000150.000034305.html
・ugo、フィジカルAIの研究開発を加速する『AIロボット向け模倣学習キット』を発表
https://prtimes.jp/main/html/rd/p/000000147.000034305.html
・阿蘇くまもと空港にDXロボット「ugo mini」を追加導入
https://prtimes.jp/main/html/rd/p/000000154.000034305.html
その他の特色
会社のリアルな雰囲気がわかるPodcast配信中!https://open.spotify.com/show/51DueB6zSlbVzVXnGehD9y?si=d044bb3c4686430c
売上実績
求人No.:NJB2336711
最終更新日:2026/7/23
求人をもっと見る求人を閉じる
この企業が募集中のほかの求人
- エンプラ向けセールス<ロボティクスソリューション営業>
- 機械設計エンジニア<次世代型AIロボット開発>
- 【電気設計エンジニア】一緒に次世代型AIロボットを開発しませんか? 仕事概要
- 組み込みシステム・デバイス制御エンジニア~業務DXロボットで新しいワークスタイルを提案するベンチャー~
- ロボット制御・アプリケーションエンジニア~業務DXロボットで新しいワークスタイルを提案するベンチャー~
- 自律走行・ナビゲーション開発エンジニア(ROS 2 / SLAM)~業務DXロボットで新しいワークスタイルを提案するベンチャー~
- プロダクトマネージャー ~業務DXロボットで新しいワークスタイルを提案するベンチャー~
- 【ロボット導入サポート/テクニカルコンサルタント】顧客の現場改善を支えるポジション
- リードエンジニア~業務DXロボットで新しいワークスタイルを提案するベンチャー~
- ロボティクスOSエンジニア ~業務DXロボットで新しいワークスタイルを提案するベンチャー~
- ロボティクスエンジニア(組込/制御開発)~業務DXロボットで新しいワークスタイルを提案するベンチャー~
