V
主页
香港大学在读博士生黄绯青:RNN和LSTM有长期记忆吗?
发布人
嘉宾简介 黄绯青,香港大学统计与精算学院在读博士生,主要研究方向为高维时间序列建模、深度学习方法等。研究论文发表在ICML、AAAI等机器学习会议。 报告摘要 The LSTM network was proposed to overcome the difficulty in learning long-term dependence, and has made significant advancements in applications. With its success and drawbacks in mind, we raise the question - do RNN and LSTM have long memory? We answer it partially by proving that RNN and LSTM do not have long memory from a statistical perspective. Since the term ``long memory" is still not well-defined for a network, we propose a new definition for long memory network. To verify our theory, we make minimal modifications to RNN and LSTM and convert them to long memory networks, and illustrate their superiority in modeling long-term dependence of various datasets. 注:视频第31分钟43秒~32分53秒,PPT中d属于(-0.5,0)一行,“exponential decay”系笔误,应为“polynomial decay”。 相关资料 文章链接: https://arxiv.org/abs/2006.03860 直播分享时间:2022年5月22日20:00
打开封面
下载高清视频
观看高清视频
视频下载器
中国人民大学黄丹阳副教授:基于K-S统计量的聚类算法及在银行卡交易数据上的应用
北京大学在读博士生师佳鑫:利用超高维文本数据进行混合条件回归从而估计法外因素的影响
当你以为算法复习好了
关于我省吃俭用15W读完了港大!香港留学经验分享
斯坦福大学在读博士生金滢:无重叠的政策学习-悲观主义和广义经验伯恩斯坦不等式
北京大学王汉生教授:开学第一课 | 统计学研究什么?
北京大学王汉生教授:数据思维:从数据分析到商业价值
复旦大学在读博士生李哲:随机块模型下大规模网络的分布式社团检测算法
测测你适不适合学算法:删掉2个数
今天带你们看看亚洲排名第二,学费几十万一年的香港大学到底是什么样?
这两天的港大校友be like:
2024最火的两个模型:Informer+LSTM两大时间序列预测模型,论文精读+代码复现,究极通俗易懂!——人工智能|AI|机器学习|深度学习
重庆680分想读商科,去北京大学还是香港大学?
复旦大学郁文教授:用于生存分析的NFM(Neural Frailty Machines)
香港大学一年制建筑硕士是香还是水
B站强推!学习PyTorch的首选教程~从入门到精通一口气讲完CNN、RNN、LSTM、transformer等神经网络算法!
哈尔滨工业大学光学工程硕士,在大厂工作的薪资情况。
吹爆!2024年超火爆的两大时间序列预测算法:【Informer】+【LSTM】原理详解+代码复现,只用半天就能搞定LSTM时间序列预测任务项目实战!
佛罗里达州立大学曹宏媛副教授:一种稳健强大的高维数据可复制性分析
高考出分,是我人生爆改的开始。
复旦大学林晓蕾青年副研究员:用于 I 期剂量探索试验的贝叶斯样本量规划
复旦大学朱雪宁副教授:高维网络时间序列数据的网络自回归
浙江大学计算机硕士,在互联网大厂工作的薪资情况。
徒手实现长短期记忆网络--LSTM的结构与代码
【122集付费】太全了!一口气学完CNN、RNN、GAN、GNN、DQN、Transformer、LSTM等八大深度学习神经网络!比刷剧爽多了,草履虫都能学会!
港大没交留位费,去UCL还是gap一年?
探析B站百大UP主修成条件
数据分析师的天花板是数据科学家吗?
AI用LSTM模型进行股价预测
哈佛大学陈侃博士:部分识别治疗效果的差异效应方法
小虎 从不让人失望
PyQt5开发一个深度学习项目的GUI(2)
在港大读书要花多少钱?
北京大学张志华教授:机器学习基础
中国科学院张新雨研究员:一种关于泊松回归的模型平均方法
【概率图模型的一切】—常虹(中国科学院大学)
北京大学王汉生教授:深度学习中的统计学习
上海交大顶级985计算机博士,在大厂SSP薪资。
华东师范大学在读博士生高原:基于随机划分的小批次动量法的渐近分析
上海财经大学周帆副教授:面向应用统计专硕的人工智能课程的建设与经验总结