Autonomy Simulation Engineer (World Sim)
Generate a McCoy IQ challenge in 30 seconds.
See how candidates think and approach the work this role demands, before the phone screen. We'll build a video challenge from this posting, and you can edit or share it before it goes live.
Key details
Why this role is notable
The work combines neural rendering (3D Gaussian Splatting/NeRF) to reconstruct real mines and construction sites as simulation assets, and building world models and VLA (vision-language-action) agents to simulate and test autonomous machines. Hands-on world-model and VLA development for autonomous heavy equipment is a category that barely existed as a job a few years ago.
Job Description
Career Area:
Technology, Digital and DataJob Description:
Your Work Shapes the World at Caterpillar Inc.
When you join Caterpillar, you're joining a global team who cares not just about the work we do – but also about each other. We are the makers, problem solvers, and future world builders who are creating stronger, more sustainable communities. We don't just talk about progress and innovation here – we make it happen, with our customers, where we work and live. Together, we are building a better world, so we can all enjoy living in it.
岗位职责：
1. 高保真数字场景构建
基于3D Gaussian Splatting（3DGS）、NeRF等神经渲染技术，构建高精度三维数字场景。
将真实矿山、施工现场及道路环境快速迁移至仿真平台。
优化场景重建质量、渲染效率及场景资产管理流程。
2. Vision-Language-Action（VLA）模型开发
参与VLA模型研发与训练。
探索自然语言驱动的智能体行为生成方法。
支持仿真环境中的任务理解、决策执行及行为评估。
3. World Model研发
参与世界模型（World Model）设计与实现。
构建环境动态预测能力，支持场景演化模拟与长时序决策推理。
探索基于大模型的环境理解与未来状态预测方法。
4. 仿真数据生成与验证平台建设
开发自动化数据生成工具链。
建设闭环仿真验证体系，支持感知、规划和控制算法的大规模测试验证。
参与仿真场景开发、数据管理及测试结果分析。
5. 前沿AI技术研究
跟踪并研究Generative AI、Foundation Models、Reinforcement Learning等前沿技术。
探索AI技术在场景生成、驾驶行为建模及智能体训练中的应用。
将最新研究成果快速落地到实际业务场景。
任职要求（Qualifications）
1.基本要求
2027届硕士及以上学历（优秀本科生亦可）。
计算机科学、人工智能、自动化、机器人、数学、电子工程等相关专业。
2.专业知识
(1)计算机/人工智能及相关专业
(2)熟悉计算机视觉基础理论。
(3)了解3D重建、多视图几何、SLAM或神经渲染相关技术。
(4)熟悉NeRF、3DGS等技术者优先。
(5)了解世界模型及世界模型在仿真中的应用
(6)了解Transformer、LLM、VLM等基础架构。
(7)对VLA、Embodied AI、具身智能方向有浓厚兴趣。
(8)具备仿真环境开发经验者优先。
3.编程能力
熟练掌握Python。
熟悉PyTorch深度学习框架。
具备良好的数据结构与算法基础。
具备Linux开发环境使用经验。
4.综合能力
良好的学习能力和技术钻研能力。
对前沿AI技术保持持续关注和探索热情。
良好的沟通协作能力和团队合作精神。
具备阅读英文技术文献和论文的能力。
Posting Dates:
November 4, 2026 - December 3, 2026Caterpillar is an Equal Opportunity Employer. Qualified applicants of any age are encouraged to apply
Not ready to apply? Join our Talent Community.
