新闻资讯

【今日要闻】深度探索:机器人技术革新与智能化进展

440
0
2025-04-17 20:00:25

DeepSeek的Janus-Pro表现如何?-虎嗅网

当机器人看到一张图片时,会用一个特别的“眼睛”(叫SigLIP编码器)来仔细观察图片,然后,把看到的内容变成一串数字(高维语义特征)。这些数字像图片的“指纹”,能帮助机器人理解图片里有什么。接下来,数字会被整理成一排,通过一个翻译器(适配🔵·登录器)转换成机器理解的语言。当机器人需要根据文字描述画面时,它会用另一个工具(叫VQ tokenizer)把图片变成一串代码(离散ID)。这些代码,就像图片的“密码”,机器人可以根据密码重建照片。紧接着,代码也会被整理成一排,通过另一个“翻译器。

深度探索:机器人技术革新与智能化进展

人形机器人,如何决定中美制造业未来?

具体来说,这个系统就像是给机器人装上了一套高级的大脑和眼睛。首先,它的眼睛(VLM)能看懂周围的环境,比如看到桌子上有个杯子,知道杯子在哪里,长什么样。然后,它的大脑(LLM)会根据眼睛看到的信息,通过编码器-解码器结构,将图像特征转换成语言描述,用人类的语言来描述这个场景,比如“拿起杯子”。最后,这个大脑还会告诉机器人怎么动,比如怎么伸手,怎么用力,确保机器人能正确地把杯子拿起来。不过,在具体控制机器人时,RT-2本身并不直接获取或调整机器人硬件的具体参数,如电机的电压或电。

方大达钢焊牌机器人“上岗”

焊牌机器人正在试运行。 本报讯 (记者 魏华 魏磊) 识别、选取、焊接……近日,记者走进位于达州东部经开区麻柳智造城的方大达钢轧钢厂双高棒车间,看到焊牌机器人正在试运行,其机械手臂不停运转,动作一气呵成。作为轧钢厂双高棒车间生产线全新投入的自动化设备,焊牌机器人主要通过双目摄像头🍀·登录视觉系统识别成品钢材包装端面,并选取合适的钢筋末端焊接标牌。和传统的人工焊牌相比,焊牌机器人不但能确保标牌准确固定,避免人工错漏,还能给企业降低用工成本。“以前产品贴铭牌都是人工操作,劳动强度大,贴出。

抛弃OpenAI,Figure亮王牌:史上首次两个机器人「共脑」,网友直呼太恐怖

如果我们能够将视觉语言模型(Vision Language Models,VLM)中捕获的丰富语义知识直接转化为机器人动作,将会带来什么改变? 这种新能力将从根本上改变机器人技术的发展轨迹(图1)。突然间,那些曾经需要数百次示教才能掌握的新技能,现在只需通过自然语言与机器人对话就能立即获得。关键问题在于:我们如何从VLM中提取所有这些常识知识,🍅并将其转化为可泛化的机器人控制?Helix的构建正是为了跨越这一鸿沟。首创「系统1,系统2」VLA 团队表示,Helix是首个由「系统。

HumanPlus——斯(sī)坦(tǎn)福(fú)ALOHA团(tuán)队(duì)开(kāi)源(yuán)的(de)人(rén)形(xíng)机(jī)器(qì)人(rén):融(róng)合(hé)影(yǐng)子(zi)学(xué)习(xí)技(jì)术(shù)、RL、模(mó)仿(fǎng)学(xué)习(xí)-CSDN博(bó)客(kè)

HaMeR使(shǐ)用(yòng)MANO [72]手(shǒu)模(mó)型(xíng)预(yù)测(cè)手(shǒu)势(shì)、相(xiāng)机(jī)参(cān)数(shù)和(hé)形(xíng)状(zhuàng)参(cān)数(shù) 我(wǒ)们(men)使(shǐ)用(yòng)上(shàng)述(shù)方(fāng)法(fǎ)进(jìn)行(xíng)实(shí)时(shí)人(rén)类(lèi)到(dào)人(rén)形(xíng)机(jī)器(qì)人(rén)的(de)手(shǒu)部(bù)重(zhòng)定(dìng)向(xiàng) 将(jiāng)训(xun)练(liàn)好(hǎo)的(de)Humanoid Shadowing Transformer部(bù)署(shǔ)到(dào)真(zhēn)实(shí)机(jī)器(qì)人(rén)上(shàng),就(jiù)可(kě)以(yǐ)实(shí)现(xiàn)运(yùn)动(dòng)模(mó)仿(fǎng)功(gōng)能(néng)了(le),具(jù)体(tǐ)步(bù)骤(zhòu)如(rú)下(xià)(基(jī)本(běn)就(jiù)是(shì)拍(pāi)摄(shè)-估(gū)计(jì)-重(zhòng)定(dìng)位(wèi)-给(gěi)HST-运(yùn)动(dòng)/控(kòng)制(zhì)): 使(shǐ)用(yòng)RGB摄(shè)像(xiàng)头(tóu)拍(pāi)摄(shè)人(rén)类(lèi)运(yùn)动(dòng) 用(yòng)上(shàng)面(miàn)讲(jiǎng)过(guò)的(de)WHAM和(hé)HaMeR等(děng)算(suàn)法(fǎ)从(cóng)RGB图(tú)像(xiàng)中(zhōng)实(shí)时(shí)估(gū)计(jì)人(rén)体(tǐ)和(hé)手(shǒu)部(bù)关节(jié)🎷角(jiǎo)度(dù) 将(jiāng)估(gū)计(jì)的(de)人(rén)体(tǐ)姿(zī)态(tài)重(zhòng)定(dìng)向(xiàng)为(wèi)机(jī)器(qì)人(rén)目(mù)标(biāo)姿(zī)态(tài) 将(jiāng)机(jī)器(qì)人(rén)状(zhuàng)态(tài)和(hé)目(mù)标(biāo)姿(zī)态(tài)输(shū)。