1
3
数学库
提问帖
有回复
K100AI 部署Qwen3.6-35B-A3B模型
2026-10-13 14:18:47
69
模型启动的时候一直提示没有足够可用的共享内存,如图:
全部评论(4)
只看楼主
南
南亿
2楼
你可以使用单卡或者双卡的情况下部署测试一下
10/14
_
_cjshawn
回复 @南亿
好的好的,感谢感谢!
10/14
S
sunjq
1楼
容器启动时,增大 shm 是否还会有相关报错?另外,可参考 cookbook 调整 Serve 启动命令:https://github.com/HYGON-AI/inference-cookbook-das/blob/main/docs/model-deployment/vllm/qwen3.6.md#qwen36-35b-a3b-ifb-k100_ai-2x-vllm-021 
若仍有问题,麻烦贴出容器启动和 Serve 启动命令
10/13
_
_cjshawn
回复 @sunjq
增大shm也会有相关报错,启动命令截图如下:attachmentId-image.png
10/13
没有更多内容了
--
楼主
Level.4
0 帖子
楼主热帖
暂无数据