0
2
0
0
框架组件
新人贴
triton 推理 分类检测模型
2026-07-29 17:00:30
82
操作
预处理 和 推理 部分如何加速?有没有相关的demo。
K100-ai
大模型
deepseek
qwen
dtk
全部评论(1)
只看楼主
L
L
这个人很懒,什么也没留下~
0
发帖总数
0
点赞
0
已关注
0
粉丝
关注
私信
屏蔽
lironggui
只看此人
1楼
建议先抓一下profiling数据,看看性能瓶颈在哪里,然后有针对的优化
给你一些优化思路:
torch.compile
内存格式转换:NCHW->NHWC
气泡消除
warmup
算子融合
8/3
赞
回复
@圈友
暂无数据
尚未选择
发送
没有更多内容了
--
楼主
0
点赞
0
帖子
关注
私信
楼主热帖
暂无数据
常见问题新帖
暂无数据
气泡消除
warmup