当前位置: 首页 > news >正文

做闪图的网站单页网站模板修改

做闪图的网站,单页网站模板修改,辽宁网站建设招标,重庆做网站哪家好概述: 本文介绍用Open webui ollama搭建一套Deepseek推理服务,可以在web页面上直接进行对话。作为体验搭建的是Deepseek 7b参数版本 首先选择一个云厂商创建一台ubuntu系统的虚拟机,带公网IP,通过shell登录虚拟机完成以下操作&…

概述:

本文介绍用Open webui + ollama搭建一套Deepseek推理服务,可以在web页面上直接进行对话。作为体验搭建的是Deepseek 7b参数版本

首先选择一个云厂商创建一台ubuntu系统的虚拟机,带公网IP,通过shell登录虚拟机完成以下操作;如果选择下通过docker安装,建议选择海外网络。

搭建方式一:docker搭建

安装docker:

sudo apt updatesudo apt-get install apt-transport-https ca-certificates curl software-properties-common lrzsz -ysudo curl -fsSL https://mirrors.aliyun.com/docker-ce/linux/ubuntu/gpg | sudo apt-key add -sudo add-apt-repository "deb [arch=amd64] https://mirrors.aliyun.com/docker-ce/linux/ubuntu $(lsb_release -cs) stable"sudo apt updatesudo apt-get install docker-ce -y

安装open webui

启动open webui

docker run --network host -d -v ollama:/root/.ollama -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:ollama 

如果虚机是带GPU的可以通过下面命令启动

docker run --network host -d --gpus=all -v ollama:/root/.ollama -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:ollama

启动后可以通过docker ps 命令查看容器正常运行:

通过netstate -natp查看监听端口:

设置云平台安全组放通8080端口

启动过程会自动下载一些文件,通过命令docker logs open-webui -f 查看启动日志,等文件下载完即可通过:http://虚机ip:8080访问webui

第一次登录,根据自己情况输入名称,邮箱,密码完成本地注册

从选择模型下拉框中输入“deepseek-r1:7b” 进行下载,或者登录Ollama.com查找自己想要的模型

等模型下载完就可以进行对话,由于最近deepseek火热,模型下载速度很慢需要1-4个小时

搭建方式二:安装命令安装

 

sudo -i#安装conda
wget https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.shbash Miniconda3-latest-Linux-x86_64.sh#创建python 3.11环境
export PATH=/root/miniconda3/bin:$PATHconda create -n py311 python=3.11 -ysource activate py311#安装ollama
curl -fsSL https://ollama.com/install.sh | sh#安装open webui
pip config set global.index-url https://pypi.tuna.tsinghua.edu.cn/simple
pip3 install open-webui#启动ollama
nohup ollama serve |tee ./ollama.log &#启动open webui
nohup open-webui serve --port 8080|tee ./webui.log 2>&1 &

可以通过tail -f webui.log 查看open webui启动日志,启动过程会自动下载一些文件,通过看日志确认文件下载完便可以通过8080端口访问,后续步骤如方式一

http://www.yayakq.cn/news/160879/

相关文章:

  • php双语网站企业网站手机端跳转设置
  • 工程中心网站建设汇报手机域名做网站中国谁第一家
  • 怎样才能做自己的网站做视频比较好的理财网站
  • 学设计的素材网站网站备案需要注意什么
  • 网站的前期调研怎么做wordpress自定义分类目录
  • 网站建设批复意见丽水集团网站建设
  • 商城网站开发的完整流程网站开发实战asp制作视频
  • 5种有效增加网站流量网站大全官网
  • 网站文字链接腾讯云主机能给几个网站备案
  • 网站怎么做备案号超链接邢台提供网站建设公司报价
  • app与网站的区别婚姻网站建设注意事项
  • 做网站就常州专业做网站
  • 电子商务网站建设实训感想茶叶门户网站建立
  • 商标设计网站推荐中国电子商务官网
  • 建设部职业资格注册中心网站网站怎么在工信部备案信息
  • 旅游网站的建设依据和背景网站建设的新闻动态
  • wordpress排名怎样肇庆网站快速排名优化
  • 备案 增加网站徐州房产网
  • 北京网站建设公司 fim淘宝客网站开源
  • 网站建设改版升级优秀的wordpress涉及
  • 专门做优惠劵的网站建设银行官方网站手机版
  • 太原网站推广优化成都旅游学院
  • gta手机网站大全企业网站备案案例
  • 建设征婚网站制作微信公众号需要多少钱
  • 山东建大建设有限公司网站网站内页301
  • 网站架构分析工具成都企业网站建设公司电话
  • 网站建设的商业阶段金融网站怎么做
  • 做暧昧免费视频大全网站lunix安装wordpress
  • 企业网站建设能开广告服务费吗山东省住房和城乡建设厅
  • 如何对网站进行爬虫请打开网站