开源项目one-api的k8s容器化部署（上）-- 制作镜像及部署准备

news/2024/5/4 11:00:01/文章来源:https://blog.csdn.net/zhuganlai168/article/details/137597969

一、背景

最近需要对开源项目one-api进行k8s容器化部署，主要分以下几个步骤：

  • 制作docker镜像
  • 申请mysql和redis数据库
  • docker-compose部署方式
  • k8s部署方式

整个的篇幅比较长，将会分成上下两篇来阐述。

二、制作docker镜像

开源项目one-api已经提供了Dockerfile文件，按说制作一个私有镜像是非常简单的事情，可是却遇到了一个大坑。
主要是因为golang的版本问题。

官方Dockerfile所使用的是golang，并没有指定版本，也即golang:latest。
go version查看得到其版本为1.17。

这是我们要修改的第一点，指定golang的版本。

# 修改前
FROM golang AS builder2# 修改后
FROM golang:1.19-alpine AS builder2

golang:1.19-alpine

在这里插入图片描述

第二、我们在构建go项目的时候，增加国内镜像代理，以加速构建。

ENV GOPROXY=https://goproxy.cn,direct

第三、整个Dockerfile先是构建前端页面，再是构建go项目。本文主要是针对go项目的构建进行了改动。
完整的Dockerfile，修改后的内容，详见下：

# 指定golang的版本
FROM golang:1.19-alpine AS builder2# 增加go镜像代理
ENV GOPROXY=https://goproxy.cn,direct \GO111MODULE=on \CGO_ENABLED=1 \GOOS=linux# 切换工作目录至/build
WORKDIR /buildADD go.mod go.sum ./
RUN go mod download# 安装C编译器
RUN apk add --no-cache build-baseCOPY . .
COPY --from=builder /web/build ./web/build
RUN go build -ldflags "-s -w -X 'github.com/songquanpeng/one-api/common.Version=$(cat VERSION)' -extldflags '-static'" -o one-api# 总结这一阶段，会在工作目录/build下生成一个可执行文件one-api# 下面是把它单拎出去，使用轻量级容器alpine，运行该可执行文件。FROM alpineRUN apk update \&& apk upgrade \&& apk add --no-cache ca-certificates tzdata \&& update-ca-certificates 2>/dev/null || true# 把可执行文件/build/one-api拷贝至alpine系统的根目录/下
COPY --from=builder2 /build/one-api /EXPOSE 5175# 切换工作目录至/data
WORKDIR /data# 运行根目录下的可执行文件one-api
ENTRYPOINT ["/one-api"]

golang版本导致build报错

  • /go/pkg/mod/github.com/jackc/pgx/v5@v5.5.4/pgtype/builtin_wrappers.go:9:2: package net/netip is not in GOROOT (/usr/local/go/src/net/netip)
    在Go 1.17及以后的版本中，net/netip包已经被移动到golang.org/x/net模块中。这个错误的解决办法就是升级go版本。

  • github.com/mattn/go-sqlite3 cgo: C compiler “gcc” not found: exec: “gcc”: executable file not found in $PATH
    安装CGO所需的C编译器和库，在RUN go mod download后面，在RUN go build的前面，增加命令：RUN apk add --no-cache build-base。（因为golang:1.19-alpine使用musl libc，而不是glibc，并且默认不包含gcc）

  • Step 20/29 : RUN go mod download
    —> Running in f29cd7f8f144
    go mod download: zip: not a valid zip file
    这是因为网络慢导致的错误，解决版本是使用go镜像代理。

  • github.com/jackc/puddle/v2
    /go/pkg/mod/github.com/jackc/puddle/v2@v2.2.1/pool.go:142:30: undefined: atomic.Int64
    note: module requires Go 1.19
    github.com/mattn/go-sqlite3
    cgo: C compiler “gcc” not found: exec: “gcc”: executable file not found in $PATH
    这个错误是当时使用了golang:1.19镜像，后修改为golang:1.19-alpine解决。

其他调试命令

如果你根据报错信息去修改的话，可能会需要打印一些环境信息。

  • RUN go env
  • RUN go version
  • RUN echo $PATH

在构建docker镜像的过程中，还遇到许多报错，这里就不一一列举，报错的原因也都是因为golang的版本，期间使用过1.16/1.18/1.19，最后是使用1.19-alpine解决。

而one-api项目的go.mod文件指定使用1.18。

所以说，关于golang的版本问题很乱，我也是一通乱试。

在这里插入图片描述

三、关系型数据库DDL

在开发环境，我们只需新建数据库one_api即可。
但是，在生产环境，我们建议你手动建库建表.

CREATE DATABASE `one_api` /*!40100 DEFAULT CHARACTER SET utf8mb4 COLLATE utf8mb4_bin */;CREATE TABLE `one_api`.`abilities` (`group` varchar(32) COLLATE utf8mb4_bin NOT NULL,`model` varchar(191) COLLATE utf8mb4_bin NOT NULL,`channel_id` bigint(20) NOT NULL,`enabled` tinyint(1) DEFAULT NULL,`priority` bigint(20) DEFAULT '0',PRIMARY KEY (`group`,`model`,`channel_id`),KEY `idx_abilities_priority` (`priority`),KEY `idx_abilities_channel_id` (`channel_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin;CREATE TABLE `one_api`.`channels` (`id` bigint(20) NOT NULL AUTO_INCREMENT,`type` bigint(20) DEFAULT '0',`key` text COLLATE utf8mb4_bin,`status` bigint(20) DEFAULT '1',`name` varchar(191) COLLATE utf8mb4_bin DEFAULT NULL,`weight` bigint(20) unsigned DEFAULT '0',`created_time` bigint(20) DEFAULT NULL,`test_time` bigint(20) DEFAULT NULL,`response_time` bigint(20) DEFAULT NULL,`base_url` varchar(191) COLLATE utf8mb4_bin DEFAULT '',`other` longtext COLLATE utf8mb4_bin,`balance` double DEFAULT NULL,`balance_updated_time` bigint(20) DEFAULT NULL,`models` longtext COLLATE utf8mb4_bin,`group` varchar(32) COLLATE utf8mb4_bin DEFAULT 'default',`used_quota` bigint(20) DEFAULT '0',`model_mapping` varchar(1024) COLLATE utf8mb4_bin DEFAULT '',`priority` bigint(20) DEFAULT '0',`config` longtext COLLATE utf8mb4_bin,PRIMARY KEY (`id`),KEY `idx_channels_name` (`name`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin;CREATE TABLE `one_api`.`logs` (`id` bigint(20) NOT NULL AUTO_INCREMENT,`user_id` bigint(20) DEFAULT NULL,`created_at` bigint(20) DEFAULT NULL,`type` bigint(20) DEFAULT NULL,`content` longtext COLLATE utf8mb4_bin,`username` varchar(191) COLLATE utf8mb4_bin DEFAULT '',`token_name` varchar(191) COLLATE utf8mb4_bin DEFAULT '',`model_name` varchar(191) COLLATE utf8mb4_bin DEFAULT '',`quota` bigint(20) DEFAULT '0',`prompt_tokens` bigint(20) DEFAULT '0',`completion_tokens` bigint(20) DEFAULT '0',`channel_id` bigint(20) DEFAULT NULL,PRIMARY KEY (`id`),KEY `index_username_model_name` (`model_name`,`username`),KEY `idx_logs_token_name` (`token_name`),KEY `idx_logs_model_name` (`model_name`),KEY `idx_logs_channel_id` (`channel_id`),KEY `idx_logs_user_id` (`user_id`),KEY `idx_created_at_type` (`created_at`,`type`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin;CREATE TABLE `one_api`.`options` (`key` varchar(191) COLLATE utf8mb4_bin NOT NULL,`value` longtext COLLATE utf8mb4_bin,PRIMARY KEY (`key`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin;CREATE TABLE `one_api`.`redemptions` (`id` bigint(20) NOT NULL AUTO_INCREMENT,`user_id` bigint(20) DEFAULT NULL,`key` char(32) COLLATE utf8mb4_bin DEFAULT NULL,`status` bigint(20) DEFAULT '1',`name` varchar(191) COLLATE utf8mb4_bin DEFAULT NULL,`quota` bigint(20) DEFAULT '100',`created_time` bigint(20) DEFAULT NULL,`redeemed_time` bigint(20) DEFAULT NULL,PRIMARY KEY (`id`),UNIQUE KEY `idx_redemptions_key` (`key`),KEY `idx_redemptions_name` (`name`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin;CREATE TABLE `one_api`.`tokens` (`id` bigint(20) NOT NULL AUTO_INCREMENT,`user_id` bigint(20) DEFAULT NULL,`key` char(48) COLLATE utf8mb4_bin DEFAULT NULL,`status` bigint(20) DEFAULT '1',`name` varchar(191) COLLATE utf8mb4_bin DEFAULT NULL,`created_time` bigint(20) DEFAULT NULL,`accessed_time` bigint(20) DEFAULT NULL,`expired_time` bigint(20) DEFAULT '-1',`remain_quota` bigint(20) DEFAULT '0',`unlimited_quota` tinyint(1) DEFAULT '0',`used_quota` bigint(20) DEFAULT '0',`models` varchar(191) COLLATE utf8mb4_bin DEFAULT '',`subnet` varchar(191) COLLATE utf8mb4_bin DEFAULT '',PRIMARY KEY (`id`),UNIQUE KEY `idx_tokens_key` (`key`),KEY `idx_tokens_name` (`name`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin;CREATE TABLE `one_api`.`users` (`id` bigint(20) NOT NULL AUTO_INCREMENT,`username` varchar(191) COLLATE utf8mb4_bin DEFAULT NULL,`password` longtext COLLATE utf8mb4_bin NOT NULL,`display_name` varchar(191) COLLATE utf8mb4_bin DEFAULT NULL,`role` bigint(20) DEFAULT '1',`status` bigint(20) DEFAULT '1',`email` varchar(191) COLLATE utf8mb4_bin DEFAULT NULL,`github_id` varchar(191) COLLATE utf8mb4_bin DEFAULT NULL,`wechat_id` varchar(191) COLLATE utf8mb4_bin DEFAULT NULL,`lark_id` varchar(191) COLLATE utf8mb4_bin DEFAULT NULL,`access_token` char(32) COLLATE utf8mb4_bin DEFAULT NULL,`quota` bigint(20) DEFAULT '0',`used_quota` bigint(20) DEFAULT '0',`request_count` bigint(20) DEFAULT '0',`group` varchar(32) COLLATE utf8mb4_bin DEFAULT 'default',`aff_code` varchar(32) COLLATE utf8mb4_bin DEFAULT NULL,`inviter_id` bigint(20) DEFAULT NULL,PRIMARY KEY (`id`),UNIQUE KEY `username` (`username`),UNIQUE KEY `idx_users_aff_code` (`aff_code`),UNIQUE KEY `idx_users_access_token` (`access_token`),KEY `idx_users_lark_id` (`lark_id`),KEY `idx_users_email` (`email`),KEY `idx_users_git_hub_id` (`github_id`),KEY `idx_users_we_chat_id` (`wechat_id`),KEY `idx_users_inviter_id` (`inviter_id`),KEY `idx_users_username` (`username`),KEY `idx_users_display_name` (`display_name`)
) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin;

最后，登录用户初始化一个root用户：

  • dml语句：
INSERT INTO `one_api`.`users`
(id, username, password, display_name, `role`, status, email, github_id, wechat_id, lark_id, access_token, quota, used_quota, request_count, `group`, aff_code, inviter_id)
VALUES(1, 'root', '$2a$10$HAJRqAF884IGFJYvaAR.eu82GA8vNhQR.iQ0.jEYfovZNioyD91Te', 'Root User', 100, 1, '', '', '', '', '47d954235a724c399bfc3ea400eb3b2c', 500000000000000, 0, 0, 'default', '', 0);

四、redis数据库连接

非关系型数据库，不涉及ddl和dml了，仅给出连接地址的示例（区分有无密码）

  • 无密码
    redis://:192.168.80.116:6379

  • 有密码
    redis://:{password}:192.168.80.116:6379

五、docker-compose部署

测试并验证上面制作好的docker镜像，下文将把它部署到k8s容器里。

version: '3.4'services:one-api:image: "xxx/one-api:1.0.0"container_name: one-apirestart: alwayscommand: --port 5175ports:- "5175:5175"environment:- SQL_DSN=root:123456@tcp(192.168.80.116:3306)/one_api  # 修改此行，或注释掉以使用 SQLite 作为数据库- REDIS_CONN_STRING=redis://:192.168.80.116:6379- SESSION_SECRET=random_string  # 修改为随机字符串- TZ=Asia/Shanghai

在这里插入图片描述

[root@emc7 one-api]# docker-compose psName                Command               State           Ports         
-------------------------------------------------------------------------
one-api         /one-api --port 5175        Up      0.0.0.0:5175->5175/tcp

六、推送镜像

验证docker镜像后，推送至远程仓库，为下文k8s部署做准备。

[root@emc7 one-api]# docker images | grep one
xxx/one-api                                                       1.0.0               c290c605bd1b        6 hours ago         72.1MB
xxx-harbor-registry.cn-hangzhou.cr.aliyuncs.com/xxx/one-api-web   1.0.0               c290c605bd1b        6 hours ago         72.1MB[root@emc7 one-api]# docker tag c290c605bd1b xxx-harbor-registry.cn-hangzhou.cr.aliyuncs.com/xxx/one-api-web:1.0.0[root@emc7 one-api]# docker login --username={用户名} xxx-harbor-registry.cn-hangzhou.cr.aliyuncs.com --password {密码}[root@emc7 one-api]# docker push xxx-harbor-registry.cn-hangzhou.cr.aliyuncs.com/xxx/one-api-web:1.0.0

在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.luyixian.cn/news_show_1046006.aspx

如若内容造成侵权/违法违规/事实不符，请联系dt猫网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

Idea集成Docker的快捷部署

Idea集成Docker的快捷部署

Idea集成Docker的快捷部署 配置Docker远程访问1.1 修改 `/lib/systemd/system/docker.service`1.2 替换`ExecStart`1.3 重启docker服务1.4 监听端口是否被占用1.5 服务器防火墙开启2375端口1.6 测试配置IDEA2.1 下载docker插件2.2 添加docker连接2.3 配置容器镜像加速器2.4 配置…
阅读更多...
Gradle 在 Spring 中的使用ApiHug准备-工具篇-006

Gradle 在 Spring 中的使用ApiHug准备-工具篇-006

🤗 ApiHug {Postman|Swagger|Api...} 快↑ 准√ 省↓ GitHub - apihug/apihug.com: All abou the Apihug apihug.com: 有爱，有温度，有质量，有信任ApiHug - API design Copilot - IntelliJ IDEs Plugin | Marketplace ApiHug …
阅读更多...
Redis Cluster集群模式

Redis Cluster集群模式

目录 一、理论 1.1 概念 1.2 集群的作用 1.3 redis集群的数据分片 1.4 Redis集群的主从复制模型 二、实践 2.1 Redis集群模式的搭建 2.1.1 cluster集群前期工作 2.1.2 开启群集功能 2.1.3 启动redis节点 2.1.4 启动集群 2.2 测试集群 总结 一、理论 1.1 概念 集群&a…
阅读更多...
vulhub之Webmin篇

vulhub之Webmin篇

Webmin是功能最强大的基于Web的Unix系统管理工具。管理员通过浏览器访问Webmin的各种管理功能并完成相应的管理动作。Webmin支持绝大多数的Unix系统，这些系统除了各种版本的linux以外还包括：AIX、HPUX、Solaris、Unixware、Irix和FreeBSD等。 影响版本&…
阅读更多...
JVM、maven、Nexus

JVM、maven、Nexus

一、jvm简介 1.应用程序申请内存时出现的三种情况： ①OOM:内存溢出，是指应用系统中存在无法回收的内存或使用的内存过多，最终使得程序运行要用到的内存大于能提供的最大内存。此时程序就运行不了，系统会提示内存溢出&#xff0c…
阅读更多...
自己动手封装axios通用方法并上传至私有npm仓库：详细步骤与实现指南

自己动手封装axios通用方法并上传至私有npm仓库：详细步骤与实现指南

文章目录 一、构建方法1、api/request.js2、api/requestHandler.js3、api/index.js 二、测试方法1、api/axios.js2、main.js3、app.vue4、vue.config.js5、index.html 三、打包1、配置package.json2、生成库包3、配置发布信息4、发布 四、使用1、安装2、使用 五、维护1、维护和…
阅读更多...
基于FPGA的DDR相关知识导航界面

基于FPGA的DDR相关知识导航界面

个人觉得想要真正理解DDR，那就要从SDRAM入手，SDRAM读写控制器也可以作为入门FPGA的一个判断标准，说实话I2C、UART、SPI这些接口难度太低了，会写这些接口说明不了什么。 很常见的问题，现在DDR3、SDRAM、DDR4官方都有IP&…
阅读更多...
数据结构——二叉树链式结构的实现

数据结构——二叉树链式结构的实现

大家好我是小锋，今天我们来学习的是二叉树链式结构的实现 首先我们来学习一下二叉树的基本操作 在看二叉树基本操作前我们来回顾下二叉树的概念， 二叉树是： 1. 空树 2. 非空：根节点，根节点的左子树、根节点的右…
阅读更多...
【THM】Exploit Vulnerabilities（利用漏洞）-

【THM】Exploit Vulnerabilities（利用漏洞）-

介绍 在这个房间里，我们将讨论一些识别漏洞的方法，并结合我们的研究技能来了解这些漏洞是如何被滥用的。 此外，您还会发现一些公开可用的资源，这些资源是您在执行漏洞研究和利用时的技能和工具的重要补充。然后，您将在房间的最后将所有这些应用到实际挑战中。 自动化与…
阅读更多...
如何监控容器或K8s中的OpenSearch

如何监控容器或K8s中的OpenSearch

概述 当前 OpenSearch 使用的越来越多, 但是 OpenSearch 生态还不尽完善. 针对如下情况: 监控容器化或运行在 K8s 中的 OpenSearch 我查了下, 官方还没有提供完备的方案. 这里如何监控 K8s 中的 OpenSearch, 包括安装 exporter 插件、采集、展示全环节。 OpenSearch 简介…
阅读更多...
红豆Cat 1开源｜项目三： 从0-1设计一款HTTP版本RTU（支持GNSS）产品的软硬件全过程

红豆Cat 1开源｜项目三： 从0-1设计一款HTTP版本RTU（支持GNSS）产品的软硬件全过程

HTTP版RTU（支持GNSS）项目概述 RTU（Remote Terminal Unit），中文即远程终端控制系统，负责对现场信号、工业设备的监测和控制。RTU是构成企业综合自动化系统的核心装置，通常由信号输入/出模块、微…
阅读更多...
蓝桥杯-单片机基础16——利用定时计数中断进行动态数码管的多窗口显示

蓝桥杯-单片机基础16——利用定时计数中断进行动态数码管的多窗口显示

综合查阅了网络上目前能找到的所有关于此技能的代码，最终找到了下述方式比较可靠，且可以自定义任意显示的数值。 传统采用延时函数的方式实现动态数码管扫描，在题目变复杂时效果总是会不佳，因此在省赛中有必要尝试采用定时计数器中…
阅读更多...
洪水预警：如何通过数据可视化提前应对灾害

洪水预警：如何通过数据可视化提前应对灾害

数据可视化在应对洪涝灾害问题中发挥着重要作用。洪涝灾害是一种常见而严重的自然灾害，给人们的生命、财产和生活带来了巨大的威胁和损失。而数据可视化技术通过将海量的数据转化为直观、易懂的图表、图像或地图等形式，帮助人们更好地理解洪涝灾害的发生…
阅读更多...
微服务-2 Eureka

微服务-2 Eureka

Eureka 启动页面： 同理再注册完order-service后，刷新启动页面： userservice 启动多台服务： [ 代码 ]：orderService.java（用 RestTemplate 调其他服务，用 userservice 代替 localhost:8081&…
阅读更多...
视频图像的两种表示方式YUV与RGB（4）

视频图像的两种表示方式YUV与RGB（4）

本篇主要讲YUV与RGB之间的转换，包括YUV444 颜色编码格式 转为 RGB 格式 ，RGB颜色编码格式转为 YUV444 格式。 一、 YUV与RGB之间的转换 YUV与RGB颜色格式之间进行转换时 , 涉及一系列的数学运算 ; YUV 颜色编码格式转为RGB格式的转换公式 取决于 于 YUV …
阅读更多...
数据结构——线性表（顺序存储结构）

数据结构——线性表（顺序存储结构）

语言：C语言软件：Visual Studio 2022笔记书籍：数据结构——用C语言描述如有错误，感谢指正。若有侵权请联系博主 一、线性表的逻辑结构 线性表是n个类型相同的数据元素的有限序列，对n>0，除第一元素无直接…
阅读更多...
电能质量问题有几类？再怎样进行谐波治理

电能质量问题有几类？再怎样进行谐波治理

一、为什么要进行电能质量的治理 电能质量是指电力系统中电能的质量。理想的电能应该是完美对称的正弦波。一些因素会使波形偏离对称正弦，由此便产生了电能质量问题。一方面我们研究存在哪些影响因素会导致电能质量问题，一方面我们研究这些因素会导致哪…
阅读更多...
如何用electron(vue)搜索电脑本地wifi

如何用electron(vue)搜索电脑本地wifi

对于搜索本地 WiFi 网络，可以使用 Electron 结合 Node.js 来编写一个简单的应用程序。 以下是一个基本的示例，它使用 Node.js 的 wifi 模块来搜索并列出附近的 WiFi 网络： 首先，确保你已经安装了 Node.js 和 Electron。 然后&am…
阅读更多...
linux 搭建Samba服务

linux 搭建Samba服务

Samba简介 SAMBA是⼀个实现不同操作系统之间⽂件共享和打印机共享的⼀种SMB协议的免费软件， SMB(Server Message block)协议是window下所使⽤的⽂件共享协议，我们在linux系统或 者其类unix系统当中可以通过samba服务来实现SMB功能。 （1&…
阅读更多...
【SpringBoot】-- mapstruct进行类型转换时Converter实现类不能自动生成代码问题解决

【SpringBoot】-- mapstruct进行类型转换时Converter实现类不能自动生成代码问题解决

问题描述 我的问题如下&#xff1a; 应该在红色区域生成对应的转换细节&#xff0c;但是这里只返回了一个空对象 问题解决 加入lombok-mapstruct-binding依赖,也要注意依赖引用顺序问题 <dependency><groupId>org.projectlombok</groupId><artifactId&…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023

友情链接： 我的编程经验分享 一条长河网 尧图网站开发 尧图建网站 广利置业