1. 准备Docker Compose文件
    • 在你希望保存的位置。创建一个新的文件夹,例如chatollama,并在其中创建一个名为docker-compose.yml的文件。
  1. 配置Docker Compose
    • 在docker-compose.yml文件中,添加以下内容以配置ChatOllama和其依赖的Chroma数据库服务:
version: '3.1'
services:
  chromadb:
    image: chromadb/chroma:latest
    restart: always
    ports:
      - "8000:8000"
    volumes:
      - chroma_data:/chroma/chroma

  chatollama:
    image: 0001coder/chatollama:latest
    restart: always
    pull_policy: always
    ports:
      - "3000:3000"
    volumes:
      - chatollama:/ollama/data
    environment:
      - CHROMADB_URL=http://chromadb:8000
      - DATABASE_URL=file:[自己的位置]/ai/chatollama/sqlite/data/chatollama.sqlite

volumes:
  chroma_data:
  chatollama:
  • 看不懂就直接用,别乱改,浪费时间(有感而发,别问我是怎么知道的)
  • 这里使用了两个Docker镜像:chromadb/chroma用于AI原生开源嵌入数据库Chroma,0001coder/chatollama是ChatOllama的镜像。
  1. 启动ChatOllama
    • 在包含docker-compose.yml文件的文件夹中打开终端。
    • 执行命令docker-compose up -d以启动ChatOllama和Chroma数据库服务。

我可能没配置 docker 改成国内的镜像,很慢。自己注意一下。(有感而发,别问我是怎么知道的。。。)

配置Docker

    • 在Docker Desktop启动后,进入“Preferences”(偏好设置)。
    • 在“Daemon”(守护进程)标签页中,找到“Registry mirrors”(镜像加速器)选项。
    • 添加一个Docker镜像加速器地址,例如网易的镜像地址:http://hub-mirror.c.163.com
    • 点击“Apply & Restart”(应用并重启)以保存设置。

在执行一次

docker-compose up -d

  1. 初始化数据库
    • 运行数据库初始化容器,使用命令
docker compose exec chatollama npx prisma migrate dev
  1. 访问ChatOllama
    • 在浏览器中输http://localhost:3000/访问ChatOllama的主界面。
    • 根据界面提示设置Ollama服务器地址,并进行其他相关配置
  1. 查看models

发现没有,因为要进行设计

  1. setting

http://host.docker.internal:11434

  1. 再查看models

6.对话吧

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐