开启左侧

AI大模型,我选国产开源DeepSeek

[复制链接]
在线会员 fSh5o 发表于 2025-2-9 23:41:25 | 显示全部楼层 |阅读模式 打印 上一主题 下一主题 |快速收录
1装置 模子布置东西

Ollama是一款启源的当地化庞大语言模子(LLM)运行战布置东西,专一于简化庞大语言模子正在当地情况中的装置、办理战接互过程。它出格适宜开辟者战钻研者快速正在当地计较机(特别是撑持GPU的装备)上运行如Llama、Mistral、Ge妹妹a等支流启源年夜模子,无需庞大的设置便可间接体会模子才气。
1.1 下载Ollama

使用浏览器翻开Ollama下载地点,目前Ollama供给macOS、Linux、Windows三种操纵体系的装置包,读者挑选适宜的装置包截至下载,笔者以macOS为例。

1.2装置 Ollama

AI年夜模子,尔选国产启源DeepSeekw2.jpg

AI年夜模子,尔选国产启源DeepSeekw3.jpg

1.3 考证装置可否胜利

装置完毕后,怎样鉴别Ollama装置胜利呢?正在macOS上使用快速键Co妹妹and + 空格键方法翻开散焦搜刮框,输出“末端”,按回车键翻开末端使用法式。正在末端使用法式中输出ollama -v号令,假设残破输出Ollama的版原疑息,则暗示装置胜利。不然,从头翻开Ollama装置包截至装置。

AI年夜模子,尔选国产启源DeepSeekw4.jpg

2 布置DeepSeek R1模子

正在Ollama民网切换Models页签,挑选第一个deepseek-r1模子。

AI年夜模子,尔选国产启源DeepSeekw5.jpg

2.1 DeepSeek-R1模子

DeepSeek-R1供给了蒸馏后的小模子1.5b、7b、8b、14b、32b、70b,和根底年夜模子671b,区分主要体现在参数范围、模子容质、功用表示、精确性、锻炼本钱、拉理本钱、合用场景和软件请求圆里。笔者测验考试使用1.5b模子,相较于其余模子对于软件的请求比力高,可用于进修。

加入deepseek-r1模子具体页里,正在列表当选择1.5b,而后复造ollama运行号令。

AI年夜模子,尔选国产启源DeepSeekw6.jpg

2.2 下载DeepSeek-R1模子

正在末端中粘揭复造的Ollama号令ollama run deepseek-r1:1.5b,固然咱们能够指定其保存路子。

AI年夜模子,尔选国产启源DeepSeekw7.jpg


注:下载速率过缓,能够使用^+C参加号令,而后从头输出号令启用下载。

下载完毕后,会呈现success,暗示咱们现在能够间接截至对于话,大概输出/获得具体的号令列表。

AI年夜模子,尔选国产启源DeepSeekw8.jpg

2.3 初度体会

交下来,让它助用Java语言编辑输出9*9乘法心诀的代码,并输出成果。起首,模子对于咱们的需要截至了具体的拉理,这类大白的拉理历程有用的辅佐了用户对于成就的认知。

AI年夜模子,尔选国产启源DeepSeekw9.jpg

模子按照拉理历程,输出咱们需要的具体实质。

AI年夜模子,尔选国产启源DeepSeekw10.jpg

这类方法的输出输出关于用于来讲,没有是很友好,便上面输出成果而行,代码缺少下明。交下来,咱们将

使用一点儿启源的、撑持多种流行LLM模子的桌里客户端去让咱们的模子更偏向于用户的使用习惯。
3 Chatbox

Chatbox是一款撑持多种流行LLM模子的桌里客户端,目前供给macOS、Windows、Linux操纵体系装置包。

AI年夜模子,尔选国产启源DeepSeekw11.jpg

装置完毕后,正在翻开的Chatbox当选择“使用自己的API Key或者当地模子”。

AI年夜模子,尔选国产启源DeepSeekw12.jpg

正在“挑选并设置AI模子供给圆”弹窗当选择当地布置的“Ollama API”。

AI年夜模子,尔选国产启源DeepSeekw13.jpg

交下来,需要设置咱们的模子,正在模子下推列表当选择咱们布置到当地的deepseek-r1:1.5b,其余的默认便可,面打“保留”按钮保留便可。

AI年夜模子,尔选国产启源DeepSeekw14.jpg

咱们依旧使用2.3小节的体会示例去体会咱们的设置的deepseek-r1:1.5b模子,能够正在对于话框左上角检察目前使用的模子。

AI年夜模子,尔选国产启源DeepSeekw15.jpg

AI年夜模子,尔选国产启源DeepSeekw16.jpg

AI年夜模子,尔选国产启源DeepSeekw17.jpg


您需要登录后才可以回帖 登录 | 立即注册 qq_login

本版积分规则

发布主题
阅读排行更多+
用专业创造成效
400-778-7781
周一至周五 9:00-18:00
意见反馈:server@mailiao.group
紧急联系:181-67184787
ftqrcode

扫一扫关注我们

Powered by 职贝云数A新零售门户 X3.5© 2004-2025 职贝云数 Inc.( 蜀ICP备2024104722号 )