V
主页
腾讯混元大模型负责人王迪:揭秘万亿 MoE 系统工程之道|智者访谈
发布人
本期机器之心《智者访谈》邀请到腾讯机器学习平台部总经理/混元大模型负责人王迪先生,深入腾讯从 0 到 1 自研万亿级 MoE 大模型的历程。 王迪强调,大模型是一项跨领域的系统工程,需要在约束下高效整合工程、算法、数据和业务应用,对组织能力提出了前所未有的挑战。同时,业务团队需要明确模型的能力边界,辨识哪些问题适合用模型去解决,哪些则需要通过产品设计来应对,只有技术与业务紧密协作,才能快速推出满足应用需求的 AI 产品。 腾讯的这条实践之路,让我们得以窥见大模型研发和工程的整个链路:从基础设施的构建到训练推理框架的优化,再到业务场景的落地,为理解大模型提供一个独特的视角。
打开封面
下载高清视频
观看高清视频
视频下载器
第二十课:MoE
杰出系友面对面|李沐讲座:大语言模型的实践经验和未来预测
【李宏毅】2024年公认最好的【LLM大模型】教程!大模型入门到进阶,一套全解决!2024生成式人工智慧-附带课件代码
【第5集】这些行业被李开复等投资者盯上,却与AI无关?
【2024最新】54个大模型实战项目,练完即可就业,从入门到进阶,基础到框架,你想要的全都有,建议码住!超级适合小白入门学习,大模型教程
北大王立威:理论视角看大模型,为什么AI既聪明又愚蠢 | 智者访谈
超好用的可视化工具,“透视”Transformer
强推!这可能是唯一能将AI Agent讲清楚的课程了,公认最适合新手入门Agent大模型实战系列,3小时全流程解读分析,简直比刷剧还爽!人工智能|大模型
OpenAI triton分享:Triton概述
沐神在交大讲座全过程
Flash Attention 为什么那么快?原理讲解
卧槽!腾讯混元1.2也太猛了,这个效果很难扛得住啊!
【研1基本功 (真的很简单)MoE】混合专家模型—作业:写一个MoELoRA
陶哲轩的AI数学论,一次解决一千个问题,彻底摆脱"蛮力计算"
认识混合专家模型(MoE)
transformers源码阅读——mixtral模型解读——MoE实现细节
RL vs MPC,LeCun:MPC,胜!我不看好强化学习
华五毕业,ai工程师,重度焦虑抑郁,每天都有濒死感,谈谈我的职场经历。不是我不想努力
8岁小孩成「码农」,AI辅助编程效率太高,Karpathy:太惊人
伤害性不大,侮辱性极强
清华大模型公开课第二季回归!全球顶级开源社区梦幻联动【每周更新中】
具身智能:信仰还是FOMO?
Ollama 电脑本地大模型部署实操教学演示,docker安装超详细版
ACL'24杰出论文|LM-Steer: 词向量是语言模型的方向盘
腾讯闭门会,不对外,但我忍不住发出来,我看到了2024普通人最大的机会!
00 预告【动手学深度学习v2】
懂王官方认证,没人比马斯克更懂AI,10万张H100大手笔
腾讯混元大模型实测,绝活竟然是吊打弱智吧?
奇葩问题把李沐大神整不会了
首个AI 游戏引擎问世,每秒20帧实时生成画面,颠覆2000亿游戏产业
大模型微调实践数据准备/清洗、模型微调、模型评估 全链路案例演示
AI怎么帮助数学家,陶哲轩讲解示例,还是以人类为主导
英伟达财报超预期,大杀器要发货了!老黄:我会可劲造的
[4K]上海交通大学计算机系杰出系友面对面讲座@李沐学长
【人工智能】为什么要放弃LangChain? /Octomind资深工程师
短短一年,全球最强大模型换了几次?
Llama 对决 GPT:AI 开源拐点已至?| 智者访谈
未来一年大模型发展的八大趋势
沉浸式大模型面试,你能扛到第几枪?
原生中文 腾讯混元新一代DiT模型国产大模型效果测试