首页 > 技术

卷起来了!“上厨房、进工厂”!华为云X乐聚首发通用人形机器人

2024-06-21 20:59:10      西盟科技资讯   


  近日,又一人形机器人视频在网络走红。视频中,这款人形机器人在厨房与主人流利对话,通过理解主人喜好,搭配食材,并烹饪菜肴;在工厂完成扫码包装、物流搬运、沾锡工序等任务,脏活、累活、危险活一举拿下......让人有一种科幻电影中的场景走进现实的恍惚感。

  据悉,这款“上厨房,进工厂”的具身智能人形机器人来自乐聚机器人,在6月21日华为开发者大会(HDC2024)上盘古大模型5.0发布环节亮相,华为常务董事、华为云CEO张平安在华为开发者大会上,不仅介绍了乐聚夸父人形机器人搭载盘古具身智能大模型后,在工业、家庭场景中的展现出的泛化潜力,还与机器人进行了物体识别、问答、击掌等互动,引发了市场广泛关注。

“盘古具身智能大模型”赋能,“夸父人形机器人”泛化性能显著提升

  此次亮相HDC的夸父人形机器人,系华为云与乐聚机器人战略合作以来取得的阶段性成果,通过盘古具身智能大模型使得人形机器人在智能化、泛化能力上得到了显著提升。

  目前已经实现人形机器人小样本下的泛化操作,在工业、家庭场景中展开测试,是人形机器人泛化能力提升的标志性成果。

  据悉,自2024年3月华为云与乐聚机器人签署战略合作以来,双方就“盘古具身智能大模型+夸父人形机器人”技术路线展开了充分沟通。4月,通过拟定家庭、工业等场景中示范应用案例孵化为探索目标展开了集智攻关,目前研发进程中已经打通了人形机器人数据收集、云端训练、部署推理的工作流程,形成了系列工具链。

  目前,双方正基于华为云的算力和AI能力,赋能人形机器人大脑;基于乐聚本体设计和运动控制能力,对机器人小脑和肢体的研发工作展开持续攻关,致力于打造系列pipeline和可复制推广的人形机器人产品及具身智能综合解决方案,共同构建人形机器人标准数据集、系统和工具链。

进入新拐点,人形机器人从“实验室”迈向真实“工厂、家庭”

  当前,尽管工业机器人技术已相当成熟,但在应对柔性生产需求和泛化性问题时仍显局限。相比之下,人形机器人凭借其在工业制造、商业服务和家庭养老等多个场景中的智能化应用,展现出其独特的"通用+智能"核心价值,这正是其与传统工业机器人的主要区别。

  此次华为云与乐聚的合作围绕“盘古具身智能大模型+人形机器人”,在特种、制造业、家庭典型场景下机器人泛化能力的提升进行了市场调研、测试开发和场景验证,为打造迈向通用场景的人形机器人展开了联合创新。

  在特种、制造场景下,华为云与乐聚团队深入一线场景调研,了解到亨通线缆车间中存在招工用工难、非标工序自动化难、部分危险场景安全隐患等业务痛点,例如:线束车间每年生产线缆种类达几千款,产品需求、工序流程、生产数量复杂多样无法标准化;电测工序有强压强电风险,以及沾锡、灌锡等场景下存在有毒有害、高温强噪等情况。亨通作为线缆行业领军企业,希望在原有基础上继续推进工厂现代化智能化车间建设,解决生产效率、安全性提升问题,完成产线智能制造升级改造。

  针对以上需求,双方进行了技术可行性分析,定义了整体产品形态、任务指标和行动计划,以扫码包装、物流搬运、沾锡工序等做为典型场景进行验证。

  在家庭场景方面,双方以炒菜、扫地等生活中常见的家务为典型案例,联动智能家居设备进行配合完成任务。以自动炒菜任务为例,盘古具身智能大模型为人形机器人与自动炒菜机赋能,让设备间能够拥有共同的大脑。在盘古具身智能大模型具身Agent框架下,机器人可以自主完成从场景理解、自然语言指令识别、任务规划的具身规划,到双臂协同、自主执行、可泛化操作的具身执行的全流程任务。

  “通过‘大模型+人形机器人’的融合,机器人具备了自然语言和视觉/触觉的多模态交互能力、适应多场景的泛化能力,这是之前所不能想也做不到的事。华为云与乐聚此次基于工业、家庭典型真实场景的探索,对人形机器人推进到场景应用现实意义非常大,上半年乐聚一直在埋头推进机器人进入到生产生活场景应用,协同生态链合作伙伴真正推动行业规模化产业化落地。在这其中除了乐聚自身产品技术不断更新迭代之外,强强联合的技术团队,强需求强适配度的场景都是推动乐聚小步快跑的关键因素”乐聚机器人副总裁柯真东表示。

万亿市场人形机器人产业激发市场新活力

  当前阶段社会面临传统产业招工难、人才找工作难的双重困境,而低人口出生率、人口老龄化将会是下阶段不得不直面的社会问题。在国内新旧动能转换的关键节点,百年未有之大变局中,新质生产力的发展将会破局关键。

  政策方面,2023年,工信部印发的《人形机器人创新发展指导意见》中表示人形机器人将有望成为继计算机、智能手机、新能源汽车后的颠覆性产品。同时强调需拓展场景应用,加快在特种领域、制造业典型场景、民生及重点行业推广,鼓励企业加强技术与场景深度融合。

  市场方面,比亚迪2022年年报显示,生产工人占比员工总数的78%。假设比亚迪投入生产工人总数10%的人形机器人,按单台机器人20万估算,仅一家企业就能贡献88亿元市场规模。6月14日,马斯克在特斯拉2024股东大会上表示,未来的人形机器人和人类的比例可达1:1,总量将可达100-200亿台,光擎天柱一项就能带来20万亿美元的市值。

  市场需求、政策支持、资本涌入,将人形机器人关注推向了新的高度,同时也为产业的发展按下了加速键。但人形机器人能否真的爆发,下阶段看的是能否真正进入场景产生可量化价值。

  “当前,乐聚的产业化落地也正不断加速。夸父人形机器人已在高校科研、交通劝导、展厅导览、家庭服务等场景中陆续上岗实习,此次与华为云联创在工业、家庭场景的尝试标志着机器人未来有在多场景完成多任务的潜力。”乐聚机器人副总裁柯真东表示。

  未来乐聚机器人将携手“人形机器人+”生态合作伙伴,致力于关键核心技术的攻关和产品创新,打造“像家电一样便宜,像博士一样聪明”的人形机器人产品。通过建立行业标准化解决方案,推动人形机器人迈向通用化,让人形机器人真正服务于千行万业,便利于人类生产生活。

相关阅读