sakujo
V2EX  ›  问与答

问一个大模型本地部署的问题

  •  
  •   sakujo · Jan 30, 2025 · 2743 views
    This topic created in 471 days ago, the information mentioned may be changed or developed.

    在 pc 上跑了 ollama ,想在软路由的 docker 上布置个 open-webui 供家里其他设备使用。部署好了,但是 open-webui 一直找不到模型。 我确定 ollama 的服务搭的没问题,环境变量也改了,在局域网的其他机器上都能访问到。 open-webui 的 ollama 设置里也改成了 pcip:11434,但 open-webui 就是连接不到 ollama ,有没有懂得麻烦给指导一下

    4 replies    2025-02-02 19:30:39 +08:00
    andy20160606
        1
    andy20160606  
       Jan 30, 2025
    11434 端口 是不是没打开,把防火墙先关掉试试呢
    sakujo
        2
    sakujo  
    OP
       Jan 30, 2025
    @andy20160606 #1 应该是没问题,我在局域网其他设备上访问 pcip:11434 ,都能显示 Ollama is running
    Solix
        3
    Solix  
       Jan 30, 2025 via iPhone   ❤️ 1
    在不在一个网段
    me007
        4
    me007  
       Feb 2, 2025
    猜测 是 跨域原因
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2913 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 28ms · UTC 06:28 · PVG 14:28 · LAX 23:28 · JFK 02:28
    ♥ Do have faith in what you're doing.