99国产精品欲av蜜臀,可以直接免费观看的AV网站,gogogo高清免费完整版,啊灬啊灬啊灬免费毛片

網易首頁 > 網易號 > 正文 申請入駐

DeepSeek本地化部署(Windows+Ollama+Docker+OpenWebUI)

0
分享至

DeepSeek本地化部署(Windows+Ollama+Docker+OpenWebUI)

最近抖音熱搜的DeepSeek AI火遍國內外, 在AI 行業(yè)引起了廣泛關注!

2025年1月,DeepSeek 正式發(fā)布 DeepSeek-R1 推理大模型,DeepSeek-R1 成本價格低廉,性能卓越。

最近,DeepSeek的訪問出現(xiàn)了不穩(wěn)定的問題,一個有效的解決方案是進行本地化部署。本地化部署不僅可以避免網絡波動帶來的影響,還能提供更高的隱私保護和數(shù)據(jù)安全性。通過本地化部署,用戶可以在自己的設備上運行DeepSeek模型,無需依賴外部網絡連接,從而實現(xiàn)更穩(wěn)定、更可靠的使用體驗。

DeepSeek 提供了多種使用方式,滿足不同用戶的需求和場景。本地部署在數(shù)據(jù)安全、性能、定制化、成本、離線可用性和技術自主性方面具有顯著優(yōu)勢。

接下來我詳細講解下基于Windows+Ollama+Docker+OpenWebUI 的本地化部署流程,并通過實例代碼演示。



1. 軟硬件需求

1.1 硬件需求

DeepSeek R1 本地部署的硬件需求如下:

基本推薦配置:CPU: 8核或以上,內存: 32GB或以上,存儲: 100GB SSD或以上

GPU: NVIDIA GTX2080或同等性能

DeepSeek-7B 推薦配置:RTX3060 以上顯卡 + 16G以上 內存 + 50G SSD 存儲空間

DeepSeek-70B 推薦配置:RTX4060 以上顯卡 + 32G以上 內存 + 200G SSD 存儲空間

本教程使用的硬件配置為:

CPU: Intel i5-12490/3.00GHz

內存: 32GB

存儲: 500GB SSD

GPU: NVIDIA GTX 3060。

1.2 軟件依賴

DeepSeek R1 本地部署的軟件依賴包括操作系統(tǒng)、容器化工具、編程語言、深度學習框架、數(shù)據(jù)庫、消息隊列、Web 服務器、GPU 加速工具、版本控制、包管理工具、監(jiān)控與日志工具以及安全工具。

本教程采用 Windows10 操作版本、Python 3.8 版本、PyTorch 1.7 版本。

2. Ollama 下載與安裝

2.1 Ollama 的下載

Ollama 是一個開源的本地模型運行工具,可以方便地下載和運行各種開源模型,如 Llama、Qwen、DeepSeek 等。

Ollama 提供高效、靈活的大模型部署和管理解決方案,可以簡化模型的部署流程。支持macOS、Linux、Windows 操作系統(tǒng)。

官網地址:https://ollama.com/

下載地址:https://ollama.com/download





本教程選擇 Ollama Windows 版本 下載。



2.2 Ollama 的安裝

下載完成后直接點擊 OllamaSetup.exe 進行安裝。



安裝完成后,cmd 打開命令行窗口,輸入 “ollama -v” 測試,顯示 ollama 的版本為 “0.5.7”,表明安裝成功。



2.3 Ollama 的運行

Ollama 沒有用戶界面,在后臺會自動運行,重啟電腦也會自動啟動。

打開瀏覽器,輸入 :

“http://localhost:11434/”,

顯示 “Ollama is running”。



3. deepseek-r1 模型安裝

3.1 Ollma 安裝 deepseek-r1 模型

(1)從 ollama 官網 查找 deepseek-r1 模型。



(2)點擊進入 deepseek-r1 模型,可以選擇不同版本的模型(1.5b/7b/14b/32b/70b/671b)。

deepseek-r1 提供多個版本,參數(shù)量越大,模型的性能越強大,但也需要更多的存儲和計算資源。

1.5b 模型參數(shù)為15億/1.1GB,

7b 模型參數(shù)約為 70億/4.7GB,

14b 模型參數(shù)約為 140億/9GB。

deepseek-r1 不同版本模型的執(zhí)行命令不同:

1.5b 的命令為:“ollama run deepseek-r1:1.5b”

7b 的命令為:“ollama run deepseek-r1:7b”

14b 的命令為:“ollama run deepseek-r1:14b”

推薦大家先下載較小的 1.5b 模型,把本教程的安裝程序跑通,再根據(jù)自己的硬件配置和需求安裝適當?shù)陌姹尽?/p>



(3)本教程選擇選擇 7b 模型,在命令行窗口運行安裝命令 “ollama run deepseek-r1:7b”,程序會自動下載和安裝運行。



默認地址是 “C:\Users%username%.ollama\models”。

如果要修改模型的保存地址,可以新建一個文件夾如 “C:\Model”,然后在系統(tǒng)環(huán)境變量添加系統(tǒng)變量:

“變量名:OLLAMA_MODELS,

變量值:C:\Model”。

(4)安裝完成后顯示 “success”,表明安裝成功。



3.2 使用 deepseek-r1 模型

(1)在命令行窗口運行命令 “ollama run deepseek-r1:7b”,就可以在提示行輸入,與 deepseek-r1 進行聊天。



(2)輸入 “/?”,可以獲得幫助。



通過本地命令行窗口可以使用 deepseek-r1,但這讓人回到了 DOS 年代,交互體驗很差。接下來我們按照 Docker 和 Open WebUI 用戶界面,可以更便捷地使用 deepseek-r1。

4. 安裝 Docker

Docker是一種虛擬化容器技術。Docker基于鏡像,可以秒級啟動各種容器。每一種容器都是一個完整的運行環(huán)境,容器之間互相隔離。

4.1 檢查安裝環(huán)境

在 Windows 任務管理器中,檢查系統(tǒng)是否開啟虛擬化。

打開任務管理器(Ctrl+Alt+Delete),選擇:性能 - CPU - 虛擬化,確認“虛擬化”已啟用。



如果未開啟虛擬化,則要開機重啟并進入BIOS 進行設置:在 BIOS 選擇:Advanced(高級)-- CPU Configuration – Secure Virtual Machine,設置為:Enabled(啟用)。

在 “控制面板” 打開 “程序”,然后點擊 “啟用或關閉 Windows 功能”,勾選 “Hyper-V 管理工具” 和 “Hyper-V 平臺”。



以管理員身份打開命令行窗口,輸入 “wsl --set-default-version 2”,將默認設置為 WSL 2。

通過適用于 Linux 的 Windows 子系統(tǒng) (WSL),開發(fā)人員可以安裝 Linux 發(fā)行版,并直接在 Windows 上使用 Linux 應用程序、實用程序和 Bash 命令行工具,不用進行任何修改。

命令行窗口,輸入 “wsl --update --web-download”,更新安裝 wsl。



4.2 安裝 Docker for Desktop

Docker Desktop 是 Docker 官方提供的桌面應用程序,旨在讓開發(fā)者能夠在 Windows 和 macOS 系統(tǒng)上輕松地構建、運行和共享容器化應用程序。Docker Desktop 提供了一個方便的工具集,使用戶能夠快速部署容器化應用程序,同時還包括了一些強大的功能和工具,如 Docker Engine、Docker CLI、Docker Compose 等。

從 Docker 官方 下載 Docker 安裝程序。



我們進入docker 官網,選擇自己電腦對應的版本,然后點擊下載。



依照提示完成安裝即可。



安裝時選擇推薦設置。

根據(jù)提示登錄賬號,如使用 GitHub 賬號登錄。



安裝完成后,cmd 打開命令行窗口,輸入 “docker version” 檢查,顯示 docker 的版本為 “27.4.0”,表明安裝成功。



4.3 配置docker

安裝完成后,我們打開docker,注冊登錄一下docker,然后在右下角點擊Terminal,打開控制臺,然后輸入下面命令,然后等待安裝完成。

docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main



安裝完成之后,我們在左側點擊Images(鏡像),點擊運行,如果需要有配置,默認即可。



點擊Container(容器),點擊



此時會打開web ui網頁,注冊open web-ui賬號即可使用。如果無法顯示,可以點擊進入容器查看



查看log日志,查看有沒有存在什么問題,或者嘗試重啟



注意(重啟電腦后,如果出現(xiàn) 500:Internal Error)



進入 Containers 頁面,選擇 open-web 項的 Actions列,點擊小三角啟動就行。



5. 安裝 Open WebUI

Open WebUI是一個可擴展、功能豐富、用戶友好的自托管 WebUI,旨在完全離線操作。它支持各種LLM運行程序,包括 Ollama 和 OpenAI 兼容的 API。Open WebUI 適配了 Ollama 接口,提供了 web 的方式來訪問 Ollama API。

5.1 安裝和啟動 open-webui

打開 open-webui 項目的 Github 倉庫

https://github.com/open-webui/open-webui:



從 README 的安裝指南找到用于 Ollama 的安裝命令

docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main



在命令行執(zhí)行 docker 命令,自動下載并安裝 open-webui。



5.2 登錄 Open-WebUI 進入 deepseek-r1z

在瀏覽器輸入 “l(fā)ocalhost:3000/auth” 或 “http://127.0.0.1:3000”,進入 Open-WebUI 首頁。



注冊賬號密碼,創(chuàng)建管理員賬號。

注冊完成并登錄,就進入 deepseek-r1 模型的首頁:



現(xiàn)在,我們就可以用本地部署的 deepseek-r1 模型進行聊天了。

聲明:個人原創(chuàng),僅供參考

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
性蕭條時代到來,這才是人類最大的危機

性蕭條時代到來,這才是人類最大的危機

邱處機
2025-03-19 19:30:06
事發(fā)在重慶一超市附近,現(xiàn)場1人受重傷

事發(fā)在重慶一超市附近,現(xiàn)場1人受重傷

小南看城市
2025-05-13 23:23:18
藍色玻璃,為什么讓人害怕?

藍色玻璃,為什么讓人害怕?

樓主說樓市
2025-05-13 20:20:58
中方發(fā)布公告,對美關稅降至10%,特朗普大筆一揮,對華再退一步

中方發(fā)布公告,對美關稅降至10%,特朗普大筆一揮,對華再退一步

阿鳧愛吐槽
2025-05-14 09:38:38
終于,全國容積率都在下降了

終于,全國容積率都在下降了

真叫盧俊
2025-05-13 10:55:08
中國日用品供應商心態(tài)變了!美國、歐洲、巴西訂單都來了,不少美國客商寧愿漲價也要中國商品

中國日用品供應商心態(tài)變了!美國、歐洲、巴西訂單都來了,不少美國客商寧愿漲價也要中國商品

金融界
2025-05-14 09:27:19
媒體人:楊瀚森向NBA證明自己的投射能力和空間型發(fā)展的無限想象

媒體人:楊瀚森向NBA證明自己的投射能力和空間型發(fā)展的無限想象

狼叔評論
2025-05-14 09:54:03
看完特朗普的一日三餐,再看看普京的,網友:沒有對比就沒有傷害

看完特朗普的一日三餐,再看看普京的,網友:沒有對比就沒有傷害

八斗小先生
2025-05-10 15:00:06
印巴沖突戛然而止,竟是因為美國截獲驚人情報?萬斯又來邀功請賞

印巴沖突戛然而止,竟是因為美國截獲驚人情報?萬斯又來邀功請賞

阿紿聊社會
2025-05-13 15:13:28
武磊祝福哈維-洛佩斯:謝謝你隊長,共同戰(zhàn)斗的日子永不遺忘

武磊祝福哈維-洛佩斯:謝謝你隊長,共同戰(zhàn)斗的日子永不遺忘

懂球帝
2025-05-13 23:40:18
再次明確!最高法:債權人向債務人撥打電話,即便接聽電話的非債務人,也可認定為訴訟時效中斷

再次明確!最高法:債權人向債務人撥打電話,即便接聽電話的非債務人,也可認定為訴訟時效中斷

微法官
2025-05-10 00:05:15
破案了!終于知道具俊曄為什么暴瘦!原來他每天都去金寶山看大S

破案了!終于知道具俊曄為什么暴瘦!原來他每天都去金寶山看大S

西瓜愛娛娛
2025-05-13 10:39:06
墨西哥市長候選人直播遭槍殺 視頻記錄槍擊過程

墨西哥市長候選人直播遭槍殺 視頻記錄槍擊過程

大象新聞
2025-05-14 08:54:14
中美達成共識后,印度坐不住了,連夜提交文件,將對美國發(fā)起報復

中美達成共識后,印度坐不住了,連夜提交文件,將對美國發(fā)起報復

頭條爆料007
2025-05-14 11:44:07
印巴再爆發(fā)大戰(zhàn),中國武器又立大功,印軍出動海軍,我們得出手了

印巴再爆發(fā)大戰(zhàn),中國武器又立大功,印軍出動海軍,我們得出手了

起喜電影
2025-05-09 10:34:32
天啊!女演員寧靜怎么越來越像男人了?她寬寬的大臉盤子,身子壯

天啊!女演員寧靜怎么越來越像男人了?她寬寬的大臉盤子,身子壯

趣文說娛
2025-05-13 15:11:18
瑾汐二姐感情受傷太深,談及女兒難過想哭,小兒才6歲前夫已再婚

瑾汐二姐感情受傷太深,談及女兒難過想哭,小兒才6歲前夫已再婚

尋墨閣
2025-05-14 11:11:09
小四月給趙薇慶祝母親節(jié),瑞士就讀學校被扒,黃有龍經常去看女兒

小四月給趙薇慶祝母親節(jié),瑞士就讀學校被扒,黃有龍經常去看女兒

檸檬有娛樂
2025-05-13 10:16:58
定了!利物浦草簽弗林蓬:轉會費超3500萬 雙方簽約5年

定了!利物浦草簽弗林蓬:轉會費超3500萬 雙方簽約5年

球事百科吖
2025-05-14 12:40:27
曝蔚來NT3.0平臺車型標配天際線帶魚屏 恢復雙充電口

曝蔚來NT3.0平臺車型標配天際線帶魚屏 恢復雙充電口

手機中國
2025-05-14 10:10:04
2025-05-14 13:11:00
軟測試驗田
軟測試驗田
軟件測試領域最新最前沿資訊
64文章數(shù) 121關注度
往期回顧 全部

科技要聞

英偉達數(shù)十萬芯片+亞馬遜50億美元豪賭沙特

頭條要聞

賴清德稱臺灣與日本“像家人” 國臺辦怒斥

頭條要聞

賴清德稱臺灣與日本“像家人” 國臺辦怒斥

體育要聞

NBA最被低估球員,帶隊爆殺東部第一

娛樂要聞

姜妍自曝上藝校時因為得了獎遭霸凌

財經要聞

對美關稅:125%→10% 24%稅率暫停90天

汽車要聞

2026款豐田bZ北美市場亮相 下半年上市 bZ4X成歷史

態(tài)度原創(chuàng)

藝術
本地
健康
公開課
軍事航空

藝術要聞

故宮珍藏的墨跡《十七帖》,比拓本更精良,這才是地道的魏晉寫法

本地新聞

春色滿城關不住|溪水浣青苔 鐘乳洞藏多少光陰

唇皰疹和口腔潰瘍是"同伙"嗎?

公開課

李玫瑾:為什么性格比能力更重要?

軍事要聞

美國與沙特簽署1420億美元軍售協(xié)議

無障礙瀏覽 進入關懷版 主站蜘蛛池模板: 拉孜县| 乐清市| 墨竹工卡县| 秭归县| 柏乡县| 登封市| 察隅县| 镶黄旗| 鞍山市| 鸡西市| 呼和浩特市| 田林县| 鄂温| 镇江市| 张家界市| 和林格尔县| 微博| 华阴市| 商水县| 石城县| 合作市| 尼玛县| 桂阳县| 祁门县| 突泉县| 东兴市| 农安县| 民丰县| 陆丰市| 乌拉特中旗| 乐亭县| 溆浦县| 阿克陶县| 北海市| 社会| 瓮安县| 浙江省| 会昌县| 丰原市| 林州市| 屏东市|