3
0
0
4
AI人工智能
求vllm安装教程
2024-04-25 17:38:19
116
操作
我在网站上找到了vllm0.3.3的包,安装后在启动时xFormers报错,vllm代码仓库上有针对xFormers的rocm补丁,请问DCU上有什么特殊处理吗,谢谢!
全部评论(2)
只看楼主
P
P
这个人很懒,什么也没留下~
0
发帖总数
0
点赞
0
已关注
0
粉丝
关注
私信
屏蔽
panhuiwen
只看此人
1楼
您可以参考:https://developer.hpccube.com/codes/OpenDAS/vllm/-/tree/vllm-v0.3.3-dtk23.10。 目前xformers需要基于DCU进行重新编译。
2024/4/26
赞
回复
@圈友
暂无数据
尚未选择
发送
网
网
这个人很懒,什么也没留下~
0
发帖总数
0
点赞
0
已关注
0
粉丝
关注
私信
屏蔽
网友AvVhw2
回复
@panhuiwen
好的,我试一下,十分感谢!!!
2024/4/26
赞
回复
@圈友
暂无数据
尚未选择
发送
没有更多内容了
--
楼主
0
点赞
0
帖子
关注
私信
楼主热帖
暂无数据
常见问题新帖
暂无数据