V
主页
京东 11.11 红包
机器人讲座 —— 大行为模型 - 基于监督学习的机器人灵巧操作
发布人
摘要 机器学习的最新进展改变了多个人工智能相关领域。值得注意的是,强大的通用语言和视觉模型正在迅速成为现实,这些新功能已经开始进入面向消费者的技术领域,影响着数百万人的生活。这些基本的进步也预示着机器人技术将发生翻天覆地的变化。现在,只需一两个小时的教学和几十个 GPU 小时的计算,就能为机器人可靠地注入新的行为,例如打鸡蛋或折叠衣服。在本讲座中,我将讨论我们团队在丰田研究院推动的、由 ML 驱动的机器人行为教学规模,以及为机器人建立通用大型行为模型的未来之路。这些模型将拥有现有大型语言模型的灵活性和通用性,但能够灵巧地控制机器人,从而改变物理世界。 简历 Ben Burchfiel 是丰田研究院大型行为模型项目的经理和联合负责人,他领导的团队致力于通过大规模机器学习创造通用机器人。在加入丰田研究院之前,Ben Burchfiel 曾是布朗大学的博士后和杜克大学智能机器人实验室的博士生。在论文工作期间,Ben 主要研究三维感知、从演示中学习以及多模态视觉语言表征。在此之前,Ben 在华盛顿大学麦迪逊分校获得理学学士学位,主修计算机科学。如今,本的研究重点是通过为数据驱动方法注入软归纳偏差,使通用机器人成为现实,这种方法对世界结构的假设最少,并能随着规模的扩大而优雅地放松。
打开封面
下载高清视频
观看高清视频
视频下载器
斯坦福大学开源 - 机器人技能学习 通用操作接口 UMI (Universal Manipulation Interface) Demo
CMU 机器人讲座 —— 构建适应性强的通用机器人
实时最优控制讲座 —— 最优控制机器人软件
FAIR(Meta)机器人讲座 —— 机器人灵巧操作(Robotic Dexterous Manipulation)
CoRL 讲座 —— 用于机器人的预训练模型
实时最优控制讲座 —— 从航空航天的角度
【基于深度强化学习的冠军级别无人机竞速】强化学习和模型预测控制MPC中英字幕18讲!
斯坦福机器人讲座 —— 大规模预训练模型时代的 机器人学习
开源机器人灵巧手(Jetson Nano)教程
斯坦福开源 - 机器人技能学习 通用接口UMI - 机械夹爪 3D 打印教程
【具身论文阅读】视触联觉灵巧手操作
【中英字幕】强化学习和模型预测控制18讲!四大名校教授精讲模型预测控制、最优控制、强化学习入门
开源人形机器人强化学习训练框架!星动纪元联合清华大学、上海期智研究院发布Humanoid-Gym!
实时最优控制讲座 —— TrajectoryOptimization.jl 教程
宾大 GRASP 讲座 —— 机器人中的具身人工智能
用于控制、推理和学习的随机扩散
MIT 机器人讲座 —— MuJoCo MPC (MJPC) 介绍
密歇根大学机器人讲座 —— 动力学和控制学习的一些基本限制
ETHZ 四足机器人研究 —— 利用 3D 表征 学习在狭窄空间行走
实时最优控制讲座 —— Crocoddyl 教程
类 Sora 机器人基础模型 RFM-1:理解物理的世界模型
【具身论文阅读】DexMV: 基于人类视频数据的模仿学习灵巧手操作
大模型如何增强强化学习?简单粗暴理解大模型训练中的人类反馈强化学习RLHF!PPO算法、ChatGPT背后的数学原理
MIT 欠驱动机器人学 2024 第 7 讲 Lyapunov Analysis I
MPC+强化学习!Actor Critic模型预测控制,苏黎世大牛教授人类水平性能的自主视觉无人机演讲
CoRL 讲座 - 从演示到自主操作的机器人操作数据
CoRL 讲座 - 基于仿真学习的具身智能
ETH + Oxford 四足机器人研究 —— 野外视觉导航的快速可穿越性估计
MIT 机器人讲座 —— 利用对称性提高机器人学习的数据效率
IROS 2023 讲座 —— 从基于模型的全身控制到利用 ML 进行足式人形机器人操作
意大利 IIT 讲座 —— 结合学习和模型预测控制的机器人安全控制
西北大学机器人讲座 —— 机器人学习的控制原理
【大模型+强化学习】怎么理解大模型训练中的RLHF(人类反馈强化学习)?ChatGPT背后的数学原理
四足机器人足臂协同 ocs2 qm_control 开源项目学习
用 ROS 2 在 Isaac Sim 中驾驶自主移动机器人
机器人逆运动学示例
密歇根大学机器人讲座 —— 机器人学中的高效通用算法
【Python】人形机器人——全身控制
ETHZ 研究 —— 四足机器人深度柔顺运动控制
斯坦福大学 Khatib 讲座 —— 深海机器人探索