0
2
0
0
Qwen
提问帖
有回复
新人贴
K100(不是k100 ai),如何部署qwen3以上模型?
2026-10-13 17:35:09
112
操作
显卡:k100 使用镜像:vllm-0.15.1-kylin10sp3-dtk26.04-py3.10 部署模型:Qwen3-30B-A3B-Instruct-2507 报错内容如下:  K100是否可用于部署模型?有没有兄弟部署成功过的,给个命令
vllm
qwen3.6
全部评论(4)
只看楼主
Y
Y
这个人很懒,什么也没留下~
0
发帖总数
0
点赞
0
已关注
0
粉丝
关注
私信
屏蔽
yudeng
只看此人
2楼
官方基本放弃对k100的支持了
10/14
赞
回复
@圈友
暂无数据
尚未选择
发送
程
程
这个人很懒,什么也没留下~
0
发帖总数
0
点赞
0
已关注
0
粉丝
关注
私信
屏蔽
程少豪
回复
@yudeng
好吧
10/14
赞
回复
@圈友
暂无数据
尚未选择
发送
S
S
这个人很懒,什么也没留下~
0
发帖总数
0
点赞
0
已关注
0
粉丝
关注
私信
屏蔽
sunjq
只看此人
1楼
可以尝试一下 vLLM 0.8.5 镜像部署小参数 Dense 模型,MoE 这种应该不支持
10/13
赞
回复
@圈友
暂无数据
尚未选择
发送
程
程
这个人很懒,什么也没留下~
0
发帖总数
0
点赞
0
已关注
0
粉丝
关注
私信
屏蔽
程少豪
回复
@sunjq
K100 AI应该也是gfx926 架构,为啥大部分官方文档都可以支持
10/13
赞
回复
@圈友
暂无数据
尚未选择
发送
没有更多内容了
--
楼主
0
点赞
0
帖子
关注
私信
楼主热帖
暂无数据
常见问题新帖
暂无数据