Flash-Decoding长上下文LLM推理速度提8倍 #小工蚁
发布人
打开封面 下载高清视频 观看高清视频 视频下载器
...
DeepSpeed-FastGen比vLLM推理性能快2倍，SplitFuse策略 #小工蚁
...
VLM视觉大模型如何评测？MMMU排行榜 #小工蚁
...
多模态Embedding开源模型 Visualized BGE #小工蚁
...
开源InternLM2大模型测评 #小工蚁
...
多模态RAG检索增强生成2种实现方式 #小工蚁
...
LightLLM轻量级高性能推理框架 和vLLM哪个更强？
...
使用LangChain实现Tool Calling #小工蚁
...
大语言模型快速JSON解码算法 Jump Forward Decoding #小工蚁
...
互联网大厂在AI CodeReview代码检查成功实践 #小工蚁
...
通义千问千亿模型比720亿模型更省算力 #小工蚁
...
Text2SQL Llama 7B模型微调DuckDB-NSQL-7B #小工蚁
...
AWQ大模型量化INT4比FP16 推理快2倍，GPU内存1/3
...
无限上下文大模型推理加速StreamingLLM #小工蚁
...
零一万物发布Yi-9B大模型，代码数学推理能力全面提升 #小工蚁
...
LLM如何接入到个人微信？ 演示群聊中AI自动回复
...
MInfernece长上下文大模型推理加速4～10倍 #小工蚁
...
如何快速下载Huggingface大模型权重？#小工蚁
...
演示xllm-stream镜像如何可视化微调模型？#小工蚁
...
Qwen1.5-72B上下文推理准确度评估演示16K时最优 #小工蚁
...
微调开源模型具备Function Call讲解和演示 #小工蚁
...
ClickHouse和Elastisearch 深度对比
...
SQLEval Text2SQL能力评估实践 #小工蚁
...
MiniCPM-2B和MoE-8x2B模型 开源最强“小模型” #小工蚁
...
人类反馈强化学习最新替代方法SimPO #小工蚁
...
大语言模型企业应用排行榜，哪个模型最强？#小工蚁
...
Smaug开源大模型排行第一基于Qwen72B微调大模型 #小工蚁
...
AWQ和GPTQ大模型4bit量化 哪种算法更优？#小工蚁
...
MiniMA-Chat-3B开源小模型 中英文双语 #小工蚁
...
LangChain v0.2新版即将发布 #小工蚁
...
使用LangSmith可视化分析Langchain开发LLM应用 #小工蚁
...
LLM大模型应用场景2：Text2SQL #小工蚁
...
微软开源Dynamic SplitFuse加速大模型推理功能实践 #小工蚁
...
北大开源法律大模型ChatLaw：让法律问题不再复杂 #小工蚁 #ChatLaw
...
Qwen1.5系列6个模型如何选择？ AWQ还是GPTQ？#小工蚁
...
MindsDB开源构建AI应用平台有啥亮点？#小工蚁
...
Llama3和Llama2模型全面对比 #小工蚁
...
商汤开源Piccolo2大模型有啥亮点？#小工蚁
...
ChatBI：自然语言驱动的数据分析新时代
...
如何让大语言模型Qwen-7b使用Langchain中的工具？ #小工蚁 #qwen7b
...
微信小程序十亿级用户画像底层如何实现？#小工蚁 #clickhouse