我要投稿

Ollama本地部署DeepSeek翻译“他强任他强，清风拂山岗；他横任他横，明月照大江”

发布日期：2025-02-28 21:53:09 浏览次数： 1724 作者：技术真相

1.认识Ollama

关于Ollama的介绍中见得最多的版本是：“Ollama是一个开源的轻量级可扩展框架，用于本地机器上构建、运行和管理大型模型。”

它有几个关键词：轻量级、本地、构建运行和管理。这说明Ollama擅长在单机上部署和运行大模型，用它来在低配置的笔记本上运行大模型是再好不过的了。

2.安装Ollama

官网是：https://ollama.com/ MacOS，Linux，Windows版本都有，按照自己的需要下载安装即可。

对于Windows则是下载一个exe文件进行安装执行，对于MacOS更简单了，使用命令：

brew install ollama

即可完成安装。

然后使用如下命令: ollama pull xxx 就可以运行名为xxx的模型了。Ollama在本地实际是以CS架构方式运行的，如果在MacOS上遇到如下错误：

Error: could not connect to ollama app, is it running?

可能是在MacOS没有自动将Ollama注册成Server，只要手动执行下Ollama serve命令即可解决该错误。

今天王毅外长使用金庸名句“他强任他强，清风拂山岗；他横任他横，明月照大江”来表达中美关系，cue到了DeepSeek，因此就用这个任务来看看本地部署DeepSeek的效果吧。

3.Windows上翻译

我的Windows配置是i932G, 显卡4G内存。使用如下命令运行Deepseek-R1 14B模型：

ollama run deepseek-r1:14b

第一次执行因为本地没有模型，因此会有一个下载模型的过程，模型文件大概是9G，下载因网络而已，快速的时候能达到8M/s。

第一次翻译效果如下图所示：

整体来看，中规中矩，算是直译了。

在执行的时候，独立显存可以使用到3G的样子。这个性能还是很强劲的，记得之前跑Qwen模型， 2.5B的是极限了， Deepseek可以跑14B，进化速度真的很快很快。

4.MacOS上翻译

我的MacOS配置是M1,16G内存，即2021年的Mac。一开始觉得这个配置跑不起来14B的模型，抱着试一试想法安装了Ollama后，第一次翻译效果如下图所示：

对比Windows的第一次推理差很多，让它重新翻译给出了如下版本：

这次算是中规中矩了。在推理的时候， MacOS GPU使用率在60~70%，内存使用率则飙升，这是因为MacOS的显卡并不是使用的独享内存，而是和整个系统共享的内存。

最后，看看DeepSeek官网和chatGPT的翻译：

DeepSeek官网：

chatGPT官网：

对比来看，官网的体验确实更好些，可能是本地部署的只是14B有关吧。

53AI，企业落地大模型首选服务商

产品：场景落地咨询+大模型应用平台+行业解决方案

承诺：免费场景POC验证，效果验证后签署服务协议。零风险落地应用大模型，已交付160+中大型企业

相关资讯

2025-05-27

Dify工具插件开发和智能体开发全流程实战

2025-05-27

一个让工作效率翻倍的AI神器，Cherry Studio你值得拥有！

2025-05-27

Docext：无需 OCR，本地部署的文档提取神器，企业数据处理新选择

2025-05-26

太猛了，字节把GPT-4o级图像模型开源了！

2025-05-26

Qwen3硬核解析：从36万亿Token到“思考预算”

2025-05-26

蚂蚁集团开源antv的MCP服务：AI智能体与数据可视化的桥梁如何搭建？

2025-05-26

MinerU：高精度纸媒文档解析与数据提取一站式解决方案

2025-05-26

顶级开发者默默换掉了基础大模型

了解更多

160+中大型企业正在使用53AI

立即咨询预约演示

把握AI发展的机遇，共同探索、共同进步

2025-01-22

如何打造基于GenAI的员工服务机器人

2025-01-22

热点资讯

Ollama 本地运行大模型(LLM)完全指南

2024-07-25

我把最近爆火的 DeepSeek-V3 接到了 Cursor！

2025-01-01

万字详解DeepSeek-R1，引爆AI圈的又一力作，大模型爆发势不可挡！

2025-01-21

太强了！10大开源大模型！

2024-05-06

QWEN2.5开源上新，14B/32B回归实测：这就是最强单卡本地模型！

2024-09-20

全民进入GPT-4时代：OpenAI强势推出GPT-4o mini！彻底取代GPT-3.5！

2024-07-20

如何免费使用 Claude AI？Claude使用指南！

2024-07-11

Qwen2 阿里最强开源大模型（Qwen2-7B）本地部署、API调用和WebUI对话机器人

2024-06-12

DeepSeek-V3 正式发布

2024-12-26

开源项目Composio：突破 AI 智能体开发的边界

2024-08-13

大家都在问

蚂蚁集团开源antv的MCP服务：AI智能体与数据可视化的桥梁如何搭建？

2025-05-26

拆解OpenAI最大对手的杀手锏：为什么会是MCP？

2025-05-25

从基础大模型到场景适配，企业如何做好商业化最后一公里？

2025-05-23

AI 开源框架：Dify、Zylon、AutoGPT、Flowise、LangChain、React-Flow怎么选？

2025-05-17

刚刚，OpenAI丢出最强编程智能体Codex！倒反天罡——新上线功能竟是微软Copilotb鼻祖？

2025-05-17

刚刚，OpenAI发布自主编码代理Codex，程序员的工作将被彻底颠覆？

2025-05-17

告别谷歌！阿里开源ZeroSearch大模型搜索成本直降88%，性能竟超原版？

2025-05-16

事实证明千问qwen3小模型才是企业的生产力，他究竟能做什么呢？

2025-05-14

热门标签

内容创作大模型技术个人提效 langchain llamaindex 多模态技术 RAG技术智能客服知识图谱模型微调 RAGFlow coze Dify Fastgpt Bisheng Qanything AI+汽车 AI+金融 AI+工业 AI+培训 AI+SaaS 提示词框架提示词技巧 AI+电商 AI面试数字员工 ChatBI 知识管理开源大模型智能营销智能硬件智能化改造 AI+医疗 MaxKB