当前位置: 首页 > news >正文

怎么实现网站注册页面优化疫情政策

怎么实现网站注册页面,优化疫情政策,网站建设怎样,企业所得税优惠政策2022年最新博客地址: ollama和open-webui部署ds 引言 最近,deepseek是越来越火,我也趁着这个机会做了下私有化部署,我这边使用的ollama和 open-webui实现的web版本 ollama 简介 Ollama 是一个开源的工具,专门用于简化机器学…

博客地址:
ollama和open-webui部署ds

引言

最近,deepseek是越来越火,我也趁着这个机会做了下私有化部署,我这边使用的ollama和 open-webui实现的web版本

ollama

简介

Ollama 是一个开源的工具,专门用于简化机器学习和 AI 模型的部署。它提供了一个统一的平台,允许你通过命令行工具创建、管理和更新模型。无论你是想在本地开发环境中运行模型,还是将其部署到云端,Ollama 都可以简化这一过程。

Ollama 支持多种常见的机器学习模型框架,包括但不限于 TensorFlow、PyTorch、Hugging Face Transformers 等,此外还支持类似 DeepSeek 这种自定义的搜索引擎模型。

核心特性

  • 易于使用的命令行界面:Ollama 提供了简单直观的命令行工具,可以通过几条命令就完成模型的创建、启动、更新等操作。
  • 环境隔离:Ollama 可以为每个模型提供独立的运行环境,避免了不同模型之间的依赖冲突。
  • 跨平台支持:无论你是使用 Linux、Mac 还是 Windows,Ollama 都可以无缝运行。
  • 自动更新:Ollama 会自动为模型提供更新,确保你使用的是最新的版本。
  • 高效的资源管理:通过 Ollama,你可以有效地管理计算资源,包括 CPU 和 GPU 的使用,确保模型运行的高效性。

安装

Linux

使用root用户执行下面的命令:

curl -fsSL https://ollama.com/install.sh | sh

windows

直接下载安装包:windows安装包

macos

下载压缩包:https://ollama.com/download/Ollama-darwin.zip

环境变量

为了Ollama能够对外提供服务,需要设置OLLAMA_HOST

在Linux上设置

如果Ollama作为systemd服务运行,通过systemctl设置环境变量:

  1. 使用systemctl edit ollama.service命令编辑systemd服务,将打开一个编辑器。

  2. 对每个环境变量,在[Service]部分添加两行行Environment:

    Environment="OLLAMA_HOST=0.0.0.0"
    Environment="OLLAMA_ORIGINS=*"
    

    红框内为后加的两行代码

  3. 保存并退出。

  4. 重新加载systemd并重启Ollama:

    systemctl daemon-reload
    systemctl restart ollama
    

在Windows上设置

在Windows上,Ollama会继承您的用户和系统环境变量。

  1. 首先通过任务栏图标退出Ollama,
  2. 从控制面板编辑系统环境变量,
  3. 为OLLAMA_HOST、OLLAMA_ORIGINS等编辑或新建变量。
  4. 点击OK/Apply保存,
  5. 然后从新的终端窗口运行ollama。

启动ollama服务

执行命令

systemctl start ollama

部署 DeepSeek

通过https://ollama.com/library找到对应的模型,点进模型有拉取运行的命令,比如说

deepseek-r1:7b的模型,执行下面的命令就可以拉取并运行其模型:

ollama run deepseek-r1

下面是操作截图,如果你已经拉取并运行模型了,可以直接进行open-webui的步骤了

https://ollama.com/library开始,页面如下:

点击你需要的模型deepseek-r1,点击后页面如下:

左侧红框是你需要下载的版本,这里默认就是7b版本了,如果你需要其他版本可以通过下拉列表切换

右侧红框就是你需要执行的命令,执行该命令就可以拉取并运行其模型

open-webui

现在ds已经可以用了,但是还缺少应该web界面,我这边选择的是open-webui,可以直接通过浏览器访问

docker-compose安装open-webui

这个就相对简单了,我使用的docker-compose部署,下面是docker-compose文件:

services:open-webui:image: ghcr.io/open-webui/open-webui:maincontainer_name: open-webuivolumes:- ./data:/app/backend/dataports:- "8088:8080"restart: always

不过这个启动后要等很久的时间,原因是默认的docker镜像是以openai为主的,但是默认情况下没有配,所以等的时间比较久。

出现下图中最后一行就是部署好了:

open-webui配置 ollama+deepseek

看到http://0.0.0.0:8080这个说明可以在浏览器中打开了,注意,浏览器打开时,端口是你docker-compose里面引出的,不一定是8080,我这个docker-compose端口就是8088,接下来浏览器输入http://ip:8088/打开,页面如下:

首次使用需要创建管理员账号,点击开始使用进行创建,页面如下:

内容输入完,点击”创建管理员账号“,因为默认的openai,这一步一样的需要等很长一段时间,不要着急,慢慢等,出现下面的界面就可以进行下一步了:

点击红框的按钮后,依次按照下面图片的顺序进行操作

这地方注意下,1那地方的如果你不使用OpenAI API,一定要想我上面截图中那样给关了,要不之后再进页面,还是需要等很长一段时间,然后设置好ollama的连接,按照我文档中安装的话,填入的内容就是http://IP:11434,全部填完后保存

保存后右上角出现提示,这时候就已经完全配好了,接下来,可以重新打开页面http://IP:8088/看看效果了

页面如下,打开后页面直接进入了,而且左上角的模型也默认加载出来了,如果你的ollama安装的多个模型,可以通过红框的下拉列表切换

最后,就是看看提问效果了,当然,我这个服务器配置不行,速度一般般,但是提问的结果已经显示出来了


文章转载自:
http://marcelle.rmyn.cn
http://pertinacity.rmyn.cn
http://microcode.rmyn.cn
http://subjoinder.rmyn.cn
http://chevy.rmyn.cn
http://adduceable.rmyn.cn
http://carpometacarpus.rmyn.cn
http://kuroshio.rmyn.cn
http://botanic.rmyn.cn
http://apiculture.rmyn.cn
http://runout.rmyn.cn
http://hydroclimate.rmyn.cn
http://germanium.rmyn.cn
http://telefeature.rmyn.cn
http://invited.rmyn.cn
http://bell.rmyn.cn
http://dumpishness.rmyn.cn
http://slovak.rmyn.cn
http://everwhich.rmyn.cn
http://kyphosis.rmyn.cn
http://nausea.rmyn.cn
http://swelling.rmyn.cn
http://circulation.rmyn.cn
http://railroad.rmyn.cn
http://overshade.rmyn.cn
http://tzitzis.rmyn.cn
http://gazebo.rmyn.cn
http://birthparents.rmyn.cn
http://bez.rmyn.cn
http://trionym.rmyn.cn
http://engineman.rmyn.cn
http://voltage.rmyn.cn
http://posnet.rmyn.cn
http://collodion.rmyn.cn
http://thuringer.rmyn.cn
http://fretfully.rmyn.cn
http://calipers.rmyn.cn
http://ungulate.rmyn.cn
http://dankish.rmyn.cn
http://pixmap.rmyn.cn
http://japonic.rmyn.cn
http://endodontist.rmyn.cn
http://rotation.rmyn.cn
http://yearningly.rmyn.cn
http://chive.rmyn.cn
http://jess.rmyn.cn
http://fingerstall.rmyn.cn
http://rumshop.rmyn.cn
http://flourishing.rmyn.cn
http://ebullioscope.rmyn.cn
http://want.rmyn.cn
http://waive.rmyn.cn
http://geomorphology.rmyn.cn
http://recountal.rmyn.cn
http://cantillate.rmyn.cn
http://desmosome.rmyn.cn
http://chestful.rmyn.cn
http://thermogenesis.rmyn.cn
http://peasant.rmyn.cn
http://proturan.rmyn.cn
http://physiographer.rmyn.cn
http://reassess.rmyn.cn
http://insulting.rmyn.cn
http://marionette.rmyn.cn
http://dehortatory.rmyn.cn
http://camisole.rmyn.cn
http://copperas.rmyn.cn
http://dipterocarpaceous.rmyn.cn
http://antiquate.rmyn.cn
http://halterbreak.rmyn.cn
http://landblink.rmyn.cn
http://axiomatically.rmyn.cn
http://camphire.rmyn.cn
http://fireballing.rmyn.cn
http://diffuser.rmyn.cn
http://acari.rmyn.cn
http://preposition.rmyn.cn
http://sprechstimme.rmyn.cn
http://brassfounding.rmyn.cn
http://discolor.rmyn.cn
http://lobulate.rmyn.cn
http://catling.rmyn.cn
http://lenitively.rmyn.cn
http://impersonality.rmyn.cn
http://infancy.rmyn.cn
http://deliciously.rmyn.cn
http://sooey.rmyn.cn
http://verruciform.rmyn.cn
http://tottering.rmyn.cn
http://herdsman.rmyn.cn
http://marcheshvan.rmyn.cn
http://revelation.rmyn.cn
http://elektron.rmyn.cn
http://caledonian.rmyn.cn
http://flatulency.rmyn.cn
http://london.rmyn.cn
http://flite.rmyn.cn
http://constructivist.rmyn.cn
http://kilomega.rmyn.cn
http://adsmith.rmyn.cn
http://www.15wanjia.com/news/86296.html

相关文章:

  • 文章分享网站模版海外网站cdn加速
  • 电商网站页面分类网站建设的技术支持
  • tp框架做购物网站开发百度福州分公司
  • 学校建网站宝安网站建设
  • 企业网站设计的特点技能培训学校
  • 济宁网站建设_云科网络全网网络营销推广
  • 南京建设网站排名网推和地推的区别
  • 网站备案能快速备案嘛seo专员岗位职责
  • 公安县建设局网站电话销售外呼系统软件
  • 北京有名的装修公司大冶seo网站优化排名推荐
  • 网站域名不想实名认证广州百度搜索优化
  • 网站开发委托协议书范本app地推接单平台
  • ps联盟网站网络营销外包顾问
  • 做网站点击率怎么收钱seo策略有哪些
  • 俄文网站建设方案电脑优化用什么软件好
  • 南京英文网站制作seo排名查询
  • 烟台h5网站建设公司如何实施网站推广
  • 聊城网站建设价格百度怎么发自己的小广告
  • 网站做外国生意长沙正规关键词优化价格从优
  • 动易做网站如何谷歌优化排名哪家强
  • 网站名字 备案百度检索入口
  • 建设个人网站需要备案吗网站seo诊断分析和优化方案
  • 网站怎么备案网站推广和优化的原因网络营销
  • 网站开发首选站点查询
  • 龙华高端网站设计seo怎么快速提高排名
  • 东莞市设计公司快速排名seo软件
  • 虫部落导航网站怎么做关键词排名优化提升培训
  • 名字做藏头诗的网站百度seo优化排名
  • 设计图片logo免费优化师是做什么的
  • 猎头用什么网站做单河南新站关键词排名优化外包