DeepSeek本地部署教程

news/2025/2/11 21:44:45/文章来源:https://www.cnblogs.com/lidy5436/p/18706867

DeepSeek本地部署教程

deepseek本地部署

第一步:安装ollama
https://ollama.com/download
第二步:在ollama 官网搜索
https://ollama.com/

搜索 deepseek 选择第一项即可

image-20250205111330839

模型大小与显卡需求

模型版本 参数规模 最低显存要求 推荐 GPU 型号
DeepSeek-R1 70B 40GB NVIDIA RTX A6000(48GB)
DeepSeek-R1-Distill-32B 32B 24GB NVIDIA RTX 3090(24GB)
DeepSeek-R1-Distill-14B 14B 16GB NVIDIA RTX 4080(16GB)
DeepSeek-R1-Distill-8B 8B 12GB NVIDIA RTX 3080 Ti(12GB)
DeepSeek-R1-Distill-7B 7B 10GB NVIDIA RTX 3080(10GB)
DeepSeek-R1-Distill-1.5B 1.5B 8GB NVIDIA RTX 3060(8GB)
第三步:在终端执行 命令
ollama run deepseek-r1:1.5b

image-20250205143233193

等待安装即可

第四步:测试功能

image-20250206090621745

第五步:基本命令
#退出模型
>>> /bye#查看模型
C:\Users\chk>ollama list
NAME ID SIZE MODIFIED
deepseek-r1:1.5b a42b25d8c10a 1.1 GB 3 minutes ago#启动模型
ollama run deepseek-r1:1.5b
>>>#查看帮助
C:\Users\chk>ollama -h

可视化部署Web UI

第一步:下载Chatbox AI
https://chatboxai.app/zh

image-20250205111717305

设置中文

image-20250205113829265

第二步:将 Chatbox 连接到远程 Ollama 服务
1.在 Windows 上配置环境变量
  1. 在 Windows 上,Ollama 会继承你的用户和系统环境变量。
  2. 打开设置(Windows 11)或控制面板(Windows 10),并搜索“环境变量”。点击编辑你账户的环境变量。
  3. 为你的用户账户编辑或创建新的变量 OLLAMA_HOST,值为 0.0.0.0; 为你的用户账户编辑或创建新的变量 OLLAMA_ORIGINS,值为 *

image-20250205112246334

2.服务 IP 地址

配置后,Ollama 服务将能在当前网络中提供服务。你可以使用其他设备上的 Chatbox 客户端连接到此服务。

Ollama 服务的 IP 地址是你电脑在当前网络中的地址,通常形式如下

image-20250205112547419

192.168.2.9

在 Chatbox 中,将 API Host 设置为:

http://192.168.2.9:11434
3.注意事项
  • 可能需要在防火墙中允许 Ollama 服务的端口(默认为 11434),具体取决于你的操作系统和网络环境。

  • 为避免安全风险,请不要将 Ollama 服务暴露在公共网络中。家庭 Wifi 网络是一个相对安全的环境。

4.Chatbox配置模型

image-20250205113256999

image-20250205113218029

第三步:效果演示

image-20250206090539482

本地部署完成!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/881443.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

缺失 ffmpeg.dll 无法打开vscode

不清楚什么原因,莫名奇妙vscode打不开了弹框提示“由于找不到 ffmpeg.dll,无法继续执行代码。重新安装程序可能会解决 此问题。” 1. 找到vscode的文件位置 2. 多了一个_文件夹,将_文件夹的内容,移到上一层,即 “Microsoft VS Code”文件夹中 3. 可正常启动 PS:不清楚为什…

整理合集——Linux必备的基础知识总结

一、Linux 操作系统概述 1、发展 1991 Linus Linux 0.0.1 版,代码为 8K 行。现在最新版本为 5.12.4。Linux 加入了 GNU,整体基于 GPL 协议,允许开源、分享传播、修改。 内核下载的地址:https://www.kernel.org/ 2、组成 kernel 内核: 核心程序,用于管理硬件设备、系统的线…

海亮 SC 游寄(完结)

Castxwx:@NaPF6__qwq,小号 @Anti__void hjr:@Huang_junrui,参与 sc gjc:@SY_nzwmb83 bzy:@benbzy,参与 sc gx:@gxwinnt,校内教练Week 1 Day 0 初始坐标:JS-WX-YX,SC 学校坐标:ZJ-SX-ZJ 今天是 2024/7/3 9:00 出发,自驾,12:30 到酒店,下午没去报到 晚自习前找教室…

七分钟交友匿名聊天室源码安装出错解决办法

今天一个网友让帮忙安装七分钟交友匿名聊天室源码,看教程非常简单只有两个命令! 我是选择用的宝塔安装的,其实宝塔就一个命令就行了。 安装依赖项:npm install启动:node app.js运行:直接访问域名即可进入聊天室 但是运行以后出现错误,导致一直无法正常聊天,输入聊记录不…

IAP升级(STM32)

IAP升级(STM32) (未完,更新ing) IAP作用简述:将要升级的程序bin文件通过串口发送给STM32,STM32接收后存储到FLASH或者SRAM,用户通过事件(按键等)触发(也可延时自动触发)后将升级文件夹作用:Bootloader先烧录到stm32,作为引导接受串口bin文件升级包,以及跳转到用…

.NET适配HarmonyOS进展

1. 前言 目前国产化系统浪潮下,适配鸿蒙是中国软件大势所趋,.NET作为最适合开发客户端语言之一,适配鸿蒙系统(HarmonyOS Next)是目前.NET开发者最关心的事情。我目前业余时间正在移植Avalonia到HarmonyOS,去年在.NET Config CN上分享过,目前又取得一点进展,所以本文把所有…

点云大数据在低空经济中的应用:三维激光雷达技术探索

随着科技的飞速发展,低空经济正逐渐成为推动社会经济发展的新引擎。其中,三维激光雷达技术以其高精度、高效率的特点,在低空经济中扮演着越来越重要的角色。本文将深入探讨三维激光雷达在点云大数据领域的核心技术,以及其在多元应用中的探索与实践。一、三维激光雷达技术概…

deepseek本地部署

deepseek本地部署 下载并部署大模型(这里使用Ollama)下载并安装Ollama打开浏览器搜索ollama,访问官网。 点击右上角Download按钮,选择对应系统版本的安装包下载。 双击安装包,按提示完成安装。 验证安装:在终端输入ollama -v,出现版本号即表示安装成功。指定模型下载位置…

部署离线版DeepSeek

2025年春节前DeepSeek着实火了一把,记得刚看完美国总统特朗普召集孙正义,让他投资5000亿美金资助美国的“星际之门”计划。两天后DeepSeek出圈,轰动全球AI界。它只花费了500万美金就训练出了媲美OpenAI大模型的推理模型,关键还是开源免费的,太强了。过年前的几天瞬间在网络…

App Uploader 提交苹果应用商店 Bundle ID 故障解除

通过App Uploader提交ipa文件的时候反复提示Bundle ID错误,有点蒙。反复检查发现是uniapp里面编译ipa文件的时候写的Bundle ID和appstoreconnect里的没有对应上。以下3个位置的Bundle ID 要保持统一,不然就反复提交无法通过。保持统一后,问题解除。顺利提交ipa到苹果商店。查…

集训5 20240209

集训5 20240209 牛客竞赛_ACM/NOI/CSP/CCPC/ICPC算法编程高难度练习赛_牛客竞赛OJ A: 题目大意:给出一个整数和一个操作符,生成两个能组成这个数的因子 #include<bits/stdc++.h> #define cintie ios::sync_with_stdio(false);cin.tie(0);cout.tie(0); using namespace…

2024.2.9 鲜花

超级入门的单位根反演?推歌 《壹雫空》 もしこの雨が上がっても 就算这场大雨就此停止 忘れずに歩いてくよ 我也将永不忘怀向前行 最初のひとしずくに 顔上げた今日の僕を 那抬头仰望最初一滴雨滴的今天的我 透明な傘で作る ひとり分だけの世界 透明的伞创造出的一人份…