Open WebUI + openai API / vllm API ,实战部署教程

ops/2024/10/31 9:03:58/

介绍Open WebUI + Ollama 的使用: https://www.dong-blog.fun/post/1796

介绍vllm 的使用:https://www.dong-blog.fun/post/1781

介绍 Ollama 的使用: https://www.dong-blog.fun/post/1797

本篇博客玩个花的,Open WebUI 本身可以兼容openaiapi, 那来尝试一下。

仅供 OpenAI API 使用安装

如果您仅使用 OpenAI API,请使用此命令:

# 我当前在宿主机目录 /ssd/xiedongmkdir openwebui-testcd openwebui-test# 下面这个指令,换为自己的绝对路径挂进去
docker run -d --ipc=host -p 8081:8080 --gpus=all <

http://www.ppmy.cn/ops/129821.html

相关文章

基于 Vue + Element UI 开发管理系统指南

基于 Vue Element UI 开发管理系统指南 Vue 和 Element UI 简介Vue.js 简介Element UI 简介 1. 环境准备1.1 安装 Node.js 和 npm1.2 创建 Vue 项目1.3 安装 Element UI 2. 项目结构3. 引入 Element UI4. 基本布局4.1 使用 Element UI 布局组件 5. 路由配置5.1 安装 Vue Route…

php 程序开发分层与验证思想

在PHP程序开发中&#xff0c;合理的层级设计可以提高代码的可维护性、可扩展性和可测试性。以下是常见的层级设计模式及建议&#xff1a; 1. 分层架构 通常可以将PHP应用分为以下几层&#xff1a; 表示层&#xff08;Presentation Layer&#xff09;&#xff1a; 负责与用户交…

PHP模拟多继承的方式:traits

在面向对象编程中&#xff0c;继承是一个很常用的概念&#xff0c;允许类从其他类继承属性和方法。然而&#xff0c;多继承&#xff08;即一个类可以同时继承多个父类&#xff09;一直是开发者讨论的话题。一些编程语言&#xff0c;包括 PHP&#xff0c;不支持多继承&#xff0…

SD教程 重绘 ControlNet-Inpain

SD教程 重绘 ControlNet-Inpain ———————————————— 版权声明&#xff1a;本文为博主原创文章&#xff0c;遵循 CC 4.0 BY-SA 版权协议&#xff0c;转载请附上原文出处链接和本声明。原文链接&#xff1a;https://blog.csdn.net/A1353192296/article/details/13…

Vue.js组件开发【基础开发步骤 + 实践】

Vue.js组件开发 一、前言 在现代前端开发中&#xff0c;Vue.js 作为一个轻量级、高效的前端框架&#xff0c;因其简洁易学、灵活性强而受到广泛欢迎。而 Vue.js 的核心思想之一就是组件化开发&#xff0c;通过将应用拆分为多个小的、独立的、可复用的组件来构建复杂的单页面应…

bug-JavaArrays.fill()隐藏问题

对于一个数组想要初始一样的值&#xff0c;我们经常会这样编写。全部进行复制1&#xff0c;但是你有没有考虑过&#xff0c;如果是一个对象数组呢&#xff1f; 如果也是new Thread,这个是有五个线程&#xff0c;还是一个线程&#xff1f; 这是我在今天做哲学家问题时候遇到的…

node.js下载、安装、设置国内镜像源(永久)(Windows11)

目录 node-v20.18.0-x64工具下载安装设置国内镜像源&#xff08;永久&#xff09; node-v20.18.0-x64 工具 系统&#xff1a;Windows 11 下载 官网https://nodejs.org/zh-cn/download/package-manager 版本我是跟着老师选的node-v20.18.0-x64如图选择 Windows、x64、v20.18…

计算机网络(Ⅵ)应用层原理

一些网络应用的例子: E-mail Internaet电话 Web 电子支付 文本信息 搜索 P2P文件共享 流媒体 即时通讯 实时电视会议 .... .... 创建一个网络应用&#xff1a; 1.编程 2.在不同的端系统上运行。 网络应用的体系架构 可能的应用架构 1.客户-服…