86

星海图构建具身智能VLA模型,引领机器人智能新方向

a_632025-04-10 09:45:42   来源:中国广告网  阅读量:8788   会员投稿

星海图构建具身智能VLA模型,为机器人智能进化指引全新方向

在过去两年,机器人智能领域成绩斐然。斯坦福大学成功让桌面级机器人完成双臂系鞋带、操作透明物体等精细动作。凭借模仿学习技术,机器人已能处理家庭日常事务,甚至在医疗领域执行精细的缝线操作。

2025 年 3 月 13 日,在第三届具身智能机器人产业发展论坛上,星海图首席科学家赵行指出,将高质量真实数据与模仿学习相结合,是推动通用机器人智能发展的关键路径。在数据金字塔结构里,高质量真实数据处于顶端,数量虽少但质量极高;中间层是仿真数据,虽能借助计算机高效生成,却与真实世界有差距;底层的互联网数据容易获取,然而质量参差不齐且常缺乏动作相关信息。所以,合理获取和运用不同层级的数据,对机器人智能发展至关重要。

星海图借助模仿学习,运用高质量数据,让自家机器人完成了诸多复杂又有趣的任务,比如自动清理桌面垃圾、精准调配果汁等。全球不少机构,像斯坦福大学的一个课题组,都采购了星海图的机器人,用于衣物整理、货架摆放、家庭清洁等家务工作。

星海图是一家提供本体制造、智能研发及解决方案的全栈具身智能公司。发展过程中,常被问到三个问题:数据方面,该用真实数据、仿真数据还是互联网数据?算法上,开发模块化、端到端还是大模型算法?作为创业公司,如何获取数据并提升算法效率以控制成本?

这些问题的答案,藏在星海图的两项主要工作里。先看数据选择,过去两年,机器人具身智能领域技术突破不断,如斯坦福大学的 Aloha 系统让桌面级机器人双臂实现精细动作,还有机器人能完成家庭任务、医疗缝线等操作。从中可以看出,模仿学习和高质量真实数据结合,是通向通用具身智能的重要路径,也是目前业内认可度和技术收敛度较高的技术路线。

在具身智能的数据体系中,高质量真机采集数据质量最佳但数量稀少,处于数据金字塔顶端;中部的仿真数据生成效率高,可与真实世界有明显差距;底层的互联网数据获取容易,却质量不一且缺少动作信息。理想情况是获取顶端的高质量数据,星海图就通过模仿学习,利用高质量数据,让机器人完成桌面清扫、冲泡果汁等任务。

很多研究团队采购了星海图的机器人,斯坦福大学李飞飞课题组就用其完成一系列家务,这都借助端到端模型和高质量数据采集实现。

构建具身智能基础模型十分必要。一方面,具身智能机器人任务多样,需要一个统一架构的模型来集成各种任务,就像语言模型领域的 GPT、视频生成领域的相关模型一样;另一方面,模型能力应随数据质量和数量提升,在人工智能尤其是大语言模型范畴,模型规模、计算量和数据量能推动性能提升,不再依赖工程师手动调参或修改架构;再者,具身基础模型要具备广泛泛化能力,与传统机器人不同,能在全新环境和面对新物体时展现泛化效果,涵盖物体类内、类间、组合及跨任务泛化等。

星海图的具身基础模型分两个阶段。当前开发的第一阶段是基于模仿学习的 VOA 全身智能模型,类似大语言模型的预训练和后训练。预训练时,采用统一的 EOA 模型架构,用海量真机数据和自有 RSR 数据辅助;后训练针对特定垂直领域任务,只需少量真机数据,大幅降低单任务编辑数据成本。第二阶段,通过模仿学习和强化学习联合优化,实现全身智能和全自由度联合控制,完成更复杂任务并实现近乎零样本泛化。

除模型研发,星海图还关注空间智能。具身智能与传统视觉 AI 不同,机器人在物理世界作业,要理解三维空间和时间规律,为此推出业界首个具身智能的 Real to Seem to Real 引擎,即 RSR 引擎。RSR 引擎采用纯视觉方案进行数字孪生重建,数据采集仅用消费级设备,成本仅为专业设备的 1%。例如用手机在清华大学校园拍摄后进行三维重建,在 Real to Seem 环节,以纯视觉输入,运用基于 Gaussian Splatting 的算法进行三维重建,完成后能实现新视角渲染、几何结构重构以及语义和实例分割;seem to real 阶段则重构场景,生成新数据训练机器人操作和导航模型,提升其性能。

星海图的空间智能引擎 RSR 也分两个阶段。第一阶段利用 Gaussian Splatting 技术进行视觉孪生,重建机器人作业场景,还原精度达厘米级,构建大规模物体库和场景库,提升具身感知与导航操作能力;第二阶段采用泛化的三维视觉世界模型,重建开放场景,对动态、柔性物体建模,通过众包构建物体库和场景库,实现泛化的场景和空间理解,提高 EFM 数据利用效率。

空间智能与具身基础模型是星海图具身智能研发的关键工作。具身智能基础模型用于在线推理,构建数据闭环提升能力;具身智能引擎 RSR 是云端离线数据引擎,基于海量作业场景数据,进行高质量三维重建等工作,助力机器人实现高效泛化。通过空间智能引擎重构数字孪生场景或数据增广,还能解决真实世界高质量数据获取成本高的问题 。

声明:以上内容为本网站转自其它媒体,相关信息仅为传递更多企业信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性。投资有风险,需谨慎。

推荐阅读
星海图构建具身智能VLA模型,引领机器人智能新方向
资讯

星海图构建具身智能VLA模型,为机器人智能进化指引全新方向在过去两年,机器人智能领域成绩斐然。斯坦福大学成功让桌面级机器人完成双臂系鞋带、操作透明物体等精细动作...

2025-04-10

美联储会议纪要:通胀率略高经济前景不确定性增加
资讯

当地时间4月9日,美联储公布联邦公开市场委员会3月18日至19日的会议纪要。美联储同意将联邦基金利率目标区间维持在4.25%至4.5%之间。 会议纪要显示,目...

2025-04-10

多家公募提示风险:不要买入!
资讯

多只LOF发布场内溢价风险提示公告 伴随A股市场快速反弹,基金开始受到资金追捧,多家基金公司提示旗下LOF产品场内溢价风险。 业内人士表示,近期一系列政策持...

2025-04-10

A股周三实现“两连涨”北证50指数涨逾10%
资讯

延续涨势,主要股指悉数上涨。其中,上证指数涨逾1%,成功站稳3100点之上;北证50指数大涨逾10%。 截至当天收盘,上证指数报3186点,上涨1.31%;深...

2025-04-09

中国银行江苏省分行亮相2025江苏绿色低碳建筑国际博览会
资讯

近日,由江苏省住房和城乡建设厅主办的2025江苏绿色低碳建筑国际博览会在南京正式开幕。 本次展会以“科技点亮绿色城乡”为主题,组织了专题交流会、技术交流会等多...

2025-04-09

大众携手法雷奥、Mobileye,共筑L2+辅助驾驶新标杆
资讯

大众和法雷奥、Mobileye展开合作,共同打造L2+辅助驾驶新标杆3月25日,大众汽车集团公布重磅消息,将与法雷奥、Mobileye展开深度合作,全力升级基于...

2025-04-09

哈弗狗品类焕新一口价,9.09万起开启全场景出行
资讯

一口价9.09万起,哈弗狗品类焕新登场,解锁全场景出行新可能阳春三月,正是踏青出游的好时节,然而选车却让不少人犯了愁。大家既希望车辆能在城市通勤中具备经济性,又...

2025-04-09

荣威飞凡、MG 掀安全平权潮,打造车界安全新典范
资讯

荣威飞凡和MG引领安全平权潮流,为车界打造令人瞩目的安全新典范在汽车行业从“技术竞赛”迈向“平权战役”的进程中,车企纷纷探寻配置的最优解。上汽乘用车荣威飞凡、M...

2025-04-09

会稽山:产品结构优化,营收净利双增
资讯

突破地域走向全国 胜马财经许可 欧阳文 近日,会稽山交出了一份营收与净利双增的年度成绩单。2024年会稽山实现营业收入16.31亿元,同比增长15.60%...

2025-04-09

FFAI豪取4100万美元,全力冲刺FX下线与AI升级
资讯

FFAI顺利取得4100万美元,全力以赴朝着FX下线与AI升级迈进3月25日,FaradayFuture宣布成功签署总额达4100万美元的新增现金融资。这笔资金...

2025-04-09

海狮05EV:海洋网智驾平权先锋与市场补位强者
资讯

以海狮05EV之名:海洋网智驾平权先锋出击,有效补位市场缺口在2025年纯电SUV市场加速分化的浪潮中,3月25日,比亚迪海洋网重磅推出海狮05EV。它以11....

2025-04-09

长安跨越者D3助力物流降本增效新飞跃
资讯

凭借长安跨越者D3,物流行业降本增效迎来具有意义的新飞跃在物流行业竞争日益激烈的当下,运营成本高、运输效率提升难,成了物流企业和从业者的两大难题。而长安跨越新一...

2025-04-09

小米香港扩股配售募资55亿美元,助力电动车业务扩张
资讯

小米借香港扩股配售募资55亿美元,大力支持电动车业务拓展版图盖世汽车讯彭博社消息显示,中国科技巨擘小米集团在香港市场通过扩大股票配售规模,成功筹集到约55亿美元...

2025-04-09

和讯投顾程佳:多观察少动,不要急着出手
资讯

4月8日,和讯投顾程佳分析表示,市场今天出现了一些反弹,主要还是因为昨天美股在半夜的时候出现了一个上涨,包括a50也出现了一些拉升,早上看日本指数也回了百分之六...

2025-04-08

Franke咖啡系统在HOTELEX上海2025宣布“咖啡菁英圈”正式启
资讯

3月30日,在HOTELEX上海2025展会现场,瑞士知名全自动咖啡机品牌Franke弗兰卡咖啡系统(以下简称“Franke”)正式宣布启动弗兰卡中国咖啡菁英圈...

2025-04-08

阳光人寿宁波中支工会组织开展春季踏青活动

时值仲春、阳和初起,正是春游踏青的好时光。为丰富员工业余生活,营造和谐融洽、团结向上的工作氛围,3月23日,阳...

这所城乡接合部的新学校,为招生曾挂过三块牌子

#8203;“上级对我提的要求,就是让寒门子弟接受更好的教育,让普通孩子上好学。”一所城乡接合部的新学校,为招...

东航坠机现场:救援人员获得飞机残骸定位信息

新京报讯据中国民用航空局消息,3月21日,东航一架波音737客机在执行昆明--广州航班任务时,于梧州上空失联。...

调研指今年就业形势基本稳定实体产业人才吸引力增加

专业人力资源机构中智公司21日发布的最新调研结果显示,2022年中国就业形势基本稳定,实体产业对人才吸引力增加...

大黄鱼上热搜背后的“黑科技”

大黄鱼上热搜背后的“黑科技”前不久,浙江渔民一网捞上近2.5吨大黄鱼卖出957万元的新闻,让东海大黄鱼上了热搜...