代码拉取完成,页面将自动刷新
all:
hosts:
# 本地部署 或 远端部署 二选一
# ================ 本地部署 =====================
localhost:
ansible_connection: local
# ================ 远端部署 =====================
# host1:
# ansible_host: 127.0.0.1 # 远端IP
# ansible_port: 22 # 端口号
# ansible_user: root # 用户名
# ansible_password: PASSWORD # 密码
vars:
deepseek_version: 8b
# ollama官方下载地址: https://ollama.com/download/ollama-linux-amd64.tgz # amd64 or arm64
ollama_download: https://repo.oepkgs.net/openEuler/rpm/openEuler-24.03-LTS/contrib/oedp/files/ollama-linux-amd64.tgz # amd64 or arm64
ollama_download_path: /tmp # 下载的目标路径
# 模型文件下载地址: https://www.modelscope.cn/models/unsloth/DeepSeek-R1-Distill-Llama-8B-GGUF/resolve/master/DeepSeek-R1-Distill-Llama-8B-Q4_K_M.gguf
modelfile_download: https://repo.oepkgs.net/openEuler/rpm/openEuler-24.03-LTS/contrib/oedp/files/DeepSeek-R1-Distill-Llama-8B-Q4_K_M.gguf
modelfile_download_path: /tmp # 下载的目标路径
# 模型参数
parameter:
temperature: 0.7
top_p: 0.7
top_k: 30
num_ctx: 4096
num_thread: 4 # 线程数,建议不超过CPU核数
num_gpu: 0 # GPU数 0 for none, -1 for all.
download_checksum: true # 是否打开sha256sum校验
download_timeout: 600 # 下载大文件时的超时时间(秒)
download_retry: 6 # 下载大文件重试次数
ansible_ssh_common_args: '-o StrictHostKeyChecking=no'
此处可能存在不合适展示的内容,页面不予展示。您可通过相关编辑功能自查并修改。
如您确认内容无涉及 不当用语 / 纯广告导流 / 暴力 / 低俗色情 / 侵权 / 盗版 / 虚假 / 无价值内容或违法国家有关法律法规的内容,可点击提交进行申诉,我们将尽快为您处理。