V
主页
京东 11.11 红包
CVPR 2024最佳学生论文|BioCLIP:用于生命树的视觉基础模型
发布人
内容简介:自各种相机(从无人机到个人手机)拍摄的自然界图像,正日益成为丰富的生物信息来源。计算方法和工具,尤其是计算机视觉技术,在从图像中提取与生物学相关的信息方面取得了巨大进展,并用于科学研究和保护工作。然而,这些方法大多是为特定任务设计的定制方法,不易适应或扩展到新的问题、环境和数据集。我们迫切需要一个针对图像中一般生物学问题的视觉模型。为此,我们整理并发布了TreeOfLife-10M,这是迄今为止最大且最为多样化的可供机械学习使用的生物学图像数据集。然后我们开发了BioCLIP,一个用于生命树的基础模型,利用TreeOfLife-10M捕捉到的生物学独特特性,即植物、动物和真菌的丰富多样的图像,以及丰富的结构化生物学知识。我们在各种细粒度的生物分类任务上严格测试我们的方法,发现BioCLIP在所有任务上均显著优于现有基线(绝对值提高16%至17%)。通过视觉化的展示,我们揭示了BioCLIP学会了符合生命树的层次表达,展现了其强大的泛化能力。模型、数据和代码均已公开发布。 讲者简介:BioCLIP:用于生命树的视觉基础模型 Lisa Wu目前是一名三年级计算机科学博士生,就读于俄亥俄州立大学(OSU),由苏煜教授和赵伟仑共同指导。本科期间他就读于北卡罗来纳州立大学(NCSU)。研究生期间在加利福尼亚大学圣迭戈分校(UCSD)就读。她的研究兴趣集中在对视觉语言模型(VLM)和基础模型(foundation model)上,尤其是在生物领域的应用。
打开封面
下载高清视频
观看高清视频
视频下载器
CVPR2024|中科院、国科大等五大单位联合推出残差去噪扩散模型(RDDM):一种用于图像复原和图像生成的统一扩散模型
CVPR 2024最佳学生论文|Mip-Splatting: Alias-free 3D Gaussian Splatting
【即插即用】CVPR 2024 可形变卷积(DCNv4)
KDD'24最佳学生论文奖一作分享|Dataset Regeneration for Sequential Recommendation
【即插即用】微软 CVPR 2024 Star卷积
CVPR 2024预讲会|清华大学刘烨斌老师实验室
【即插即用】CVPR 2023 SCConv
代码讲解|高低频特征分解 |西工大开源 CVPR 2024 万能通用分解!【V1代码讲解010】
CVPR 2023预讲会-来自中科大、上交大、NUS、清华的一作学者论文预讲
ACL 2024|天津大学自然语言处理实验室专场
ICML 2024预讲会0612上午场
CVPR 2024 预讲会 0328 上午
【即插即用】CVPR 2023 锚点条带自注意力
涨点so easy!备战CVPR25! 北理工TPAMI24特征融合新思路:即插即用,调参简单,覆盖全图像预测任务
CVPR 2024预讲会|清华大学黄高老师实验室
扩散模型+医学|中科院推出残差去噪扩散模型(RDDM),磁共振扩散成像(MRI)去噪扩散模型
Panel: 顶会论文投稿经验分享与大模型时代下的科研
即插即用-CVPR可变形注意力机制,1、2、3维数据均可使用,模型指标提升!
ECCV24 10篇工作|3D视觉理解、雨滴消除、快速生成、模型蒸馏等
ACL 2024|清华大学计算机系CoAI课题组专场
CVPR 2024 预讲会——中山大学赖剑煌与谢晓华老师团队
CVPR 2024 预讲会 0327 下午
代码讲解|万能 多尺度小波特征融合 超详细!(CVPR2024) 西工大开源!【V1代码讲解008】
吹爆!这可能是B站最新的CVPR论文写作指导教程了,哈利伯顿研究员手把手带你亲历论文从选题到投稿,简直是科研小白的救星!
CVPR 2024 预讲会 0327 上午
【即插即用】CVPR 2024 单头注意力
顶会论文复现 PROVING TEST SET CONTAMINATION IN BLACK BOX LANGUAGE MODELS 下
ICLR 2023(二)-来自清华、普渡大学、中科院、上交大等13位一作作者
耗时三周整理【CVPR2024】可复现论文合集!整理了9个大方向,78篇论文!为你提供新的研究方向、启发论文创新点!-CVPR论文、SCI论文、顶会
ACL 2023 自然语言处理顶会-大模型专题:MVP、超关系知识图谱、CFSum、大模型文本生成等
ACL24最佳论文|利用扩散模型破译甲骨文语言
ACL 2024|浙江大学软件学院专场
代码讲解|低频特征提取 超详细版 |CVPR2024 西工大开源!【V1代码讲解009】
ECCV 2024 最佳论文候选!PointLLM:使大语言模型理解点云!
【即插即用】CVPR 2023 双层路由注意力
CVPR 2024预讲会0402下午场
代码讲解| StarConv 捕获高维非线性特征 微软开源 CVPR 2024 注意力机制平替方案!【V1代码讲解011】
NAACL 2024杰出论文奖:解锁大语言模型中自发涌现的模块性
ACL 2024|东北大学计算机科学与工程学院专场
即插即用-适用所有图像任务,SPA注意力机制,秒杀Resnet!更少参数,更高指标!