V
主页
[leetcode reviews] 207. Course Schedule(图算法,拓扑排序,DAG 环检测)
发布人
本期 code:https://github.com/chunhuizhang/leetcode_reviews/blob/main/%E6%95%B0%E6%8D%AE%E7%BB%93%E6%9E%84/%E5%9B%BE%EF%BC%88graph%EF%BC%89/topological_sort.ipynb
打开封面
下载高清视频
观看高清视频
视频下载器
[leetcode reviews] FSM 有限状态机导论(交通灯,考拉兹猜想 Collatz conjecture)
[leetcode reviews] 01 计算思维与刷题方法
[prompt engineering] 从 CoT 到 ToT(Tree of Thoughts)
[损失函数设计] 为什么多分类问题损失函数用交叉熵损失,而不是 MSE
[动手写 Transformer] 手动实现 Transformer Decoder(交叉注意力,encoder-decoder cross attentio)
[pytorch distributed] accelerate 基本用法(config,launch)数据并行
[矩阵分析] 分块矩阵的角度理解矩阵运算(独热向量与对角矩阵)
【数值计算】牛顿迭代法(Newton's method,Newton-Raphson method,牛顿-拉夫逊(拉弗森))计算二次方根(sqrt)三次方根
[工具的使用] 从 jupyter notebook 到 jupyter lab(网页版 vscode?)
【数字图像处理】前景背景分割GrabCut实现(python-opencv)类似PhotoShop抠图的功能
[pytorch optim] Adam 与 AdamW,L2 reg 与 weight decay,deepseed
[动手写神经网络] 可微才可学,深度学习框架自动微分计算图(DAG)
[leetcode reviews] list of list 矩阵转置与旋转(transpose & rotate)
[personal chatgpt] 从 RoPE 到 CoPE(绝对位置编码,相对位置编码,Contextual Position Encoding)
[番外] float16 与 bf16 表示和计算细节
[diffusion] 生成模型基础 VAE 原理及实现
[leetcode reviews] 62 unique paths, dfs + cache, O(m), O(n)
[pytorch] [求导练习] 03 计算图(computation graph)及链式法则(chain rule)反向传播过程
[Python 机器学习] 深入理解 numpy(ndarray)的 axis(轴/维度)
[LLMs 实践] 18 llama2 源码分析 RoPE 相对位置编码的复数形式
[QKV attention] kv-cache、decoder only vs. BERT, 单向注意力 vs. 双向注意力
[动手写神经网络] 01 认识 pytorch 中的 dataset、dataloader(mnist、fashionmnist、cifar10)
[动手写神经网络] 手动实现 Transformer Encoder
[蒙特卡洛方法] 02 重要性采样(importance sampling)及 python 实现
[pytorch distributed] 张量并行与 megtron-lm 及 accelerate 配置
[pytorch 强化学习] 10 从 Q Learning 到 DQN(experience replay 与 huber loss / smooth L1)
[机器学习理论] 霍夫丁不等式(hoeffding's inequality)到 UCB
[pytorch 强化学习] 02 将 env rendering 保存为 mp4/gif(以 CartPole 为例,mode='rgb_array')
[DRL] 从 TRPO 到 PPO(PPO-penalty,PPO-clip)
【数字图像处理】HoG+SVM+NMS行人检测(pedestrian detection)(python-opencv)
[矩阵分析] LoRA 矩阵分析基础之 SVD low rank approximation(低秩逼近)
[LLM & AIGC] 03 openai embedding (text-embedding-ada-002)基于 embedding 的文本语义匹配
[LLMs 实践] 20 llama2 源码分析 cache KV(keys、values cache)加速推理
[全栈深度学习] 01 docker 工具的基本使用及 nvidia cuda pytorch 镜像
[LLM 番外] 自回归语言模型cross entropy loss,及 PPL 评估
[动手写神经网络] 如何设计卷积核(conv kernel)实现降2采样,以及初探vggnet/resnet 卷积设计思路(不断降空间尺度,升channel)
[优化算法] 梯度下降、共轭梯度、牛顿法、逆牛顿法(BFGS)
k-Sparse AutorEncoder 与大语言模型可解释性研究(openai、claude),top-K 求导
【统计学】从置信水平(confidence level,置信区间)、Z值到最小采样数(最小抽样数)
[动手写神经网络] 05 使用预训练 resnet18 提升 cifar10 分类准确率及误分类图像可视化分析