当前位置: 首页 > news >正文

厦门门户网站建设dw网站管理与建设

厦门门户网站建设,dw网站管理与建设,杭州软件开发公司,chatgpt网站ollama语言大模型部署使用 前言一、下载安装maxkb1、下载解压赋权2、安装 二、安装ollamadocker运行 三、无需获取api_keymaxkb安装ollama模型对,就是这,你选好基础模型后,只需要给他地址,添加完成后自行调用ollama安装你选择好的…

ollama语言大模型部署使用

  • 前言
  • 一、下载安装maxkb
    • 1、下载解压赋权
    • 2、安装
  • 二、安装ollama
    • docker运行
  • 三、无需获取api_key
    • maxkb安装ollama模型
    • 对,就是这,你选好基础模型后,只需要给他地址,添加完成后自行调用ollama安装你选择好的模型
    • 添加应用,保存并发布,返回应用
    • 应用信息复制访问
    • 相当有趣的功能:嵌入第三方


前言

先说下为什么选择maxkb对接ollama
1、个人观点用着舒服,maxkb,ollama docker部署完成后,在maxkb上部署应用模型只需要选择ai模型,ollama会自行安装
2、一键话部署,方便开箱即用,提供嵌入第三方
3、有官方文档支持。
4、支持多模型,支持直接上传文档 / 自动爬取在线文档,支持文本自动拆分、向量化和 RAG(检索增强生成),智能问答交互体验好。
5、灵活编排

##1panel也支持maxkb的部署,目前应该是最快的,但是我没选。。。。选了个离线包单独部署,嫌麻烦的可以直接来个企业版,有人帮你搞。

  • maxkb官方使用手册
  • maxkb官方演示视频
  • maxkb官方论坛求助

一、下载安装maxkb

版本下载地址

1、下载解压赋权

##上传本地服务器解压、切换目录后授权
[root@ubuntu maxkb-v1.4.1-offline]# chmod +x ./*.sh[root@ubuntu maxkb-v1.4.1-offline]# ll
total 40
drwxrwxr-x. 4 root root   32 May  5  2023 docker
drwxr-xr-x. 2 root root   33 Aug  8 14:24 images
-rw-r--r--. 1 root root  442 Aug  8 14:22 install.conf
-rw-r--r--. 1 root root 9350 Aug 16 16:44 install.log
-rwxr-xr-x. 1 root root 6734 Aug  8 14:22 install.sh
-rw-r--r--. 1 root root 7030 Aug 16 16:39 kbctl
drwxr-xr-x. 4 root root   93 Aug  8 14:28 maxkb
-rw-r--r--. 1 root root   11 Aug  8 14:22 README.md
-rwxr-xr-x. 1 root root  984 Aug  8 14:22 uninstall.sh

在这里插入图片描述

2、安装

  • 飞致云的所有服务安装都会帮你初始化docker环境,有个系统直接安装就行。
##1、直接运行install安装
root@ubuntu:/u01/maxkb-v1.4.1-offline# ./install.sh ##2、docker部署,需要代理下载镜像,有丢丢大,2G左右
docker run -d --name=maxkb -p 8080:8080 -v /u01/maxkb:/var/lib/postgresql/data cr2.fit2cloud.com/1panel/maxkb# 用户名: admin
# 密码: MaxKB@123..

在这里插入图片描述

二、安装ollama

docker运行

大佬文章

##docker安装
dockert pull  ollama/ollama
##到这步就可以了。然后转maxkb web界面选择ollama ai模型,他会帮你安装
docker run -d -v /u01/ollama:/root/.ollama -p 11434:11434 --name ollama ollama/ollama##进入容器并运行大模型
docker exec -it ollama /bin/bash
##下载并运行大模型
ollama run llama3.1:70b
##列出所有模型
ollama list
##单独下载大模型
ollama pull llama3.1:70b

在这里插入图片描述

具体模型
在这里插入图片描述

三、无需获取api_key

maxkb安装ollama模型

在这里插入图片描述

对,就是这,你选好基础模型后,只需要给他地址,添加完成后自行调用ollama安装你选择好的模型

在这里插入图片描述

添加应用,保存并发布,返回应用

在这里插入图片描述

应用信息复制访问

在这里插入图片描述
在这里插入图片描述

相当有趣的功能:嵌入第三方

在这里插入图片描述

http://www.yayakq.cn/news/755253/

相关文章:

  • 油漆工找活做的网站关键词工具网站
  • 百度推广自己做网站wordpress浏览人数
  • 做音乐网站怎么放音乐企业网站建设专业精准一 鸣远科技
  • 酒泉网站建设价格wordpress 加密
  • 集团网站 备案珠宝网站开发的背景
  • 免费的网站发布谷歌seo是指什么意思
  • 做酒的网站0元免费做代理
  • 如何免费建立可以交流的网站上海网站外包
  • 缅甸做网站招聘网站建设及推广
  • 苏州网站设计公司兴田德润怎么样品牌开发者应考虑的因素
  • 百度 网站 质量度正规加盟项目
  • 杭州免费建站大连金州区房价
  • 学做快餐在哪个网站毕业设计做网站好做吗
  • 网站建设管理后台导航栏wordpress网址修改
  • 七牛搭建网站导航网址网站怎么做
  • 多语言 网站源码湖北seo服务
  • 佛山做外贸网站如何建设工程合同索赔的原因有哪些
  • dedecms 门户网站网站怎么添加js广告位
  • 黎城网站建设佛山企业如何建网站
  • 网站建设ui设计公司wordpress调用自定义文章类型
  • 做网站用linux哪个版本什么是网站的推广
  • 皂君庙网站建设优秀的网页模板网站
  • 江门建设局网站流程设计网站
  • 常德网站建设开发哪家好网站关键词在哪里做
  • 中宁建设局网站模板网站建设 百度
  • 大连可以做网站的公司网站登录页面模板
  • 如何借助网站打广告黄陂建设网站
  • 面包屑 网站手机软件下载大全
  • 台州住房和城乡建设部网站网页制作方案策划
  • 东莞网站建设工作室推广方案怎么写