在过去几年中，开发者一直在努力克服机器人抓取能力上的不足，使其能够
应用于这个市值数十亿美元的产业。如果机器人能够安全抓取和转移传送带上快速移动的物品，那么它们在这些企业中的前景将非常广阔。
马萨诸塞州贝德福德市的初创企业Soft Robotics正在使用NVIDIA Isaac Sim帮助机器人抓取应用缩小在模拟环境与现实环境中的差距，其中的一个领域是完善待包装食品的捡取和放置。
食品包装和加工企业正在使用这家初创企业的mGripAI系统。这套系统结合了软性抓取与3D视觉和人工智能（AI）技术，能够在不破坏食品的情况下抓取蛋白质、农产品、烘焙食品等脆弱的食品。
Soft Robotics软件工程高级总监David Weatherwax表示：“我们销售的是抓取解决方案中的‘手’、‘眼’和‘大脑’。”
Soft Robotics表示，不同于其他已经采用机器人技术的行业，市值8万亿美元的食品市场在开发用于处理非结构化环境中的不同物品的机器人方面一直进展缓慢。
该公司成立于2013年，最近从Tyson Ventures、Marel和Johnso
nville Ventures获得了2600万美元的C轮融资。
Tyson Foods、Johnsonville等企业正在投资于机器人自动化技术来帮助提高其工厂的安全性和产量。这两家公司都依赖Soft Robotics的技术。
Soft Robotics是NVIDIA初创加速计划成员，该计划为企业提供GPU方面的支持和AI平台方面的指导。
使用合成数据训练抓取
Soft Robotics为公司的每个抓取应用开发了单独的模型，每个模型都需要特定的数据集。对一堆湿滑的鸡肉和其他食物进行拣选是一个非常棘手的挑战。
通过Omniverse和Isaac Sim，该公司可以为不同背景下的鸡肉部位创建3D渲染图，比如传送带上、箱子中以及各种照明场景中。该公司使用Isaac Replicator开发合成数据，为每个模型生成数十万张图像并分发到云端的各种实例中。Isaac Replicator是一套使用Isaac Sim生成合成数据的工具、API和工作流程。
点击观看
视频：https://www.softroboticsinc.com/industries/protein/#true-2
它还能运行姿势估计模型，帮助抓取系统看到待抓取物品的角度。
凭借现场的NVIDIA A100 GPU，Soft Robotics能够使用这些食品加工厂每个应用所特有的模型在瞬间进行推理。同时，通过Isaac Sim中的模拟和训练功能，加工厂还可以使用NVIDIA A100扩大工作的规模。
Weatherwax表示：“我们目前的设置全部是合成的，所以能够快速部署新的应用。我们把宝都压在了Omniverse和Isaac Sim上，并且效果非常好。”
解决遮挡和照明问题
为了了解不同鸡肉块在被倒成一堆时的堆叠和重叠方式，Soft Robotics需要解决遮挡这个重大难题。
Weatherwax表示：“这些鸡肉堆的形成方式可能相当复杂。”湿鸡肉上的反光可能会使检测模型失效。“我们需要解决的另一个重大难题是照明，所以NVIDIA RTX驱动的光线追踪十分重要。”但真正重要的是为所有物品构建3D模型并在一瞬间找出堆中的哪件物品受阻最小，最容易被机器人抓手抓取和放置。
Omniverse通过构建符合物理学的合成数据集使Soft Robotics能够创造出这样的环境。我们需要克服的一大挑战是这些形状各异的物体的堆积方式。提高产线的抓取准确率食品加工厂产线上的移动速度很快，但部署了特定应用模型的机器人每分钟可进行多达100次抓取。
这种机器人目前仍在开发中，而这项工作的成败取决于对物品堆的准确表述，同时训练数据集需要涵盖物品落入堆中的所有可能方式。这个数据集是为了训练机器人知道在一个复杂、不断变化的环境中如何进行最佳的抓取。
如果食品从传送带上掉下来或因其他原因而损坏，那就会造成浪费，直接影响到产量。
推动产量增长
肉类包装公司在产线上加工鸡肉。但与许多其他行业一样，他们也面临着员工短缺问题。
Weatherwax表示，一些正在建设新食品加工厂的企业甚至无法在刚开始生产时吸引到足够的工人。“这些企业遇到了很多人手方面的问题，这推动了自动化的趋势。”
Omniverse驱动的工作使食品加工企业的模拟能力提升了10倍以上，将AI抓取系统的部署时间从几个月缩短到几天。这使Soft Robotics的客户不但能够部署自动化鸡肉抓取线，还能够应对冲击许多行业的人手问题，尤其是受伤和健康风险较高的行业。
Weatherwax表示：“机器人更适合处理生鸡肉”。
