闲来无事想部署一个本地大模型玩玩,但是这是折磨的开始。。。

一开始是更着社区大佬的文章去部署的,部署到能在cmd里面和大模型对话这一步,进行下一步调用本地api就开始遇到问题了。

我跟着大佬的文章使用apifox去调用api,于是乎,报错就来了

403报错。然后我就疯狂的去网站上找解决办法,csdn,b站,找了很久也没有找到办法,于是我就去问ai了,用ai排查了很久终于找到了原因。回答如下
是因为跨域了,我ollama请求源的设置没有包含apifox,所以报错了。

只需要停掉ollama,然后在cmd运行

set OLLAMA_ORIGINS=*

再重启ollama就可以了,然后再去apifox发送请求。大功告成

Logo

汇聚全球AI编程工具,助力开发者即刻编程。

更多推荐