在树莓派5(8G版)上运行Ollama + LLM

AI 时代程序员必备技能

Codex、Claude Code、Cursor、Hermes Agent、OpenClaw等工程化实战专栏 ,讲透 AI 如何接管脏活累活

很好奇大语言模型在性能孱弱的树莓派上做本地部署会是什么表现。不指望正儿八经的问答,外语翻译是否可行呢?抱着这个目的实验了一把,直接上结论,Ollama在树莓派上能安装,且本身运行起来毫无压力,但具体到大语言模型,Deepseek-R1似乎不总是最佳选择。

安装很简单,理论上只需要一条命令:

curl -fsSL https://ollama.com/install.sh | sh

但是,由于你懂的原因,真这么干的话可能会很慢很慢,所以可以用包含了国内加速器的指令替代:

export OLLAMA_MIRROR="https://ghproxy.cn/https://github.com/ollama/ollama/releases/latest/download"
curl -fsSL https://ollama.com/install.sh | sed "s|https://ollama.com/download|$OLLAMA_MIRROR|g" | sh

安装成功,用ollama --version测试也没问题。考虑到性能,保险起见先从deepseek-r1:1.5b开始。

迫不及待的开始进行对话,速度那是相当的不错,但质量怎么说呢,让我想起个段子:

面试官:“你简历上写着说你心算速度很快,那我问问你,13乘以19是多少?”

我脱口而出:“45!”

面试官:“这也差太远了吧。”

我:“你就说快不快吧!”

AI 时代程序员必备技能

Codex、Claude Code、Cursor、Hermes Agent、OpenClaw等工程化实战专栏 ,讲透 AI 如何接管脏活累活

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Ki1381

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值