V
主页
longlora是怎么实现的——如何在transformers的模型上修改的
发布人
介绍longlora到底是怎么实现的(其实就是加了一个shift函数,然后使用lora训练了一遍) 如何把这个longlora用在你自己的模型里面(比如百川、通义千问等)
打开封面
下载高清视频
观看高清视频
视频下载器
大模型微调核心技术
10年暴涨100倍,比特币的价格逻辑是什么?深度解析“币圈财富真相”【柏年财富说】
transformers源码阅读——如何看懂模型代码(以llama为例)
大模型量化是怎么实现的——transformers源码解读
如何优雅的修改transformers包的模型结构——面向nlp小白的开发教程
transformers源码阅读——gradient_checkpointing详解
transformers源码阅读——投机采样原理和实现方法
【大模型技术】使用Ollama+Dify搭建一个属于自己的知识库!支持多种文件类型,实现本地部署大模型,真的太好用了!
国内的大模型结构和llama有多相似?
transformers源码阅读——transformers包的文件框架介绍
transformers更新了啥S1——InternLM模型和llama模型竟然是差不多的
transformers二次开发——百度轩辕70b大模型数据调度的实现
一个视频让你对flash attention2下头(比较FA2和sdpa的效率)
自定义多模态大模型LLaVA——LLaVA系列
transformers二次开发——(定义自己的数据加载器 模型 训练器)bge模型微调流程
吴恩达大佬又出新课了!《Hugging Face中的开源模型》双语字幕,16集全,建议收藏!-huggingface、开源模型、吴恩达
transformers源码阅读——llama模型调试
大模型烧钱的原因
transformers二次开发——bge-reranker模型微调流程
图解llama架构 解读源码实现
transformers源码阅读——图解mixtral模型——图解MoE细节
大模型的成本和应用
【AI大模型】使用Ollama+Dify搭建一个专属于自己的知识库!支持多种文件类型,本地部署大模型,效果出奇的好!
transformers源码阅读——neftune的工程实现
【B站首推】零成本,教你如何训练自己的大模型
百度要放弃基础通用大模型的研发了?
transformers集成了Liger Kernel:在llm训练的时间更少、显存使用的更少
nlp开发利器——vscode如何debug transformers源码
transformers更新了啥S3——23-10-22日更新
10分钟上手Huggingface,轻松调用Bert模型预训练 | 模型下载 | 预训练模型 | 应用实战
【AI大模型】使用Ollama+Dify搭建一个全能知识库!专属自己!支持多种文件类型,实现本地化大型模型部署,效果非凡!
为什么我的模型就没有办法使用ddp——基于bert做embedding任务 使用ddp进行训练
在家怎么训练大模型的——外挂显卡(真的是物理外挂)
SFT导致大模型出现幻觉的两种原因
nlp开发利器——vscode如何debug transformers源码(deepspeed形式)
nlp开发利器——vscode愉快的写nlp代码
vLLM源码阅读s2——是如何进行离线推理的
手把手带你发现transformers的bug 并且修复它!
阅读lora源码的视频准备
草莓大模型的技术特色和应用价值