8.9 KiB
第三方服务结构化设计
背景
当前后台已经将配置相关能力拆分为两层:
场景配置:定义一个最终要运行的业务场景基础配置:承载场景配置引用的公共配置
在现有项目中,第三方服务相关配置仍然散落在模板参数中,没有独立的结构和复用关系。当前已确认存在的第三方服务参数包括:
- 对象存储:
minio_endpoint、minio_bucket、minio_access_key、minio_secret_key - 认证服务:
external_get_token_url - 告警服务:
external_put_message_url - 租户字段:
tenant_code
这些配置本质上不是某个单独场景私有的内容,而是会被多个场景反复引用的基础服务配置。继续把它们直接放在模板或场景参数里,会带来几个问题:
- 相同服务地址和密钥在多个场景中重复填写
- 修改服务地址或凭据时,需要逐个场景同步修改
- 难以判断某个第三方服务被哪些场景使用
- 服务配置与识别模板逻辑混在一起,页面职责不清楚
因此,这一轮设计的目标是把“第三方服务”独立为一类可复用的基础配置。
目标
本次设计只解决下面这些问题:
- 为第三方服务建立统一、结构化的数据模型
- 在
基础配置中提供独立的第三方服务管理入口 - 让
场景配置通过引用第三方服务完成配置,而不是直接填写服务参数 - 在生成最终 agent 配置时,将服务引用展开为现有模板参数
非目标
本次不包含以下内容:
- 不引入多环境字段,如
prod / test - 不引入适用范围字段,如客户 / 项目 / 站点
- 不做复杂权限模型
- 不做服务连通性探测
- 不做密码加密存储方案升级
- 不支持自定义服务类型
第一版只覆盖项目中已经真实存在的三类第三方服务。
服务类型
第一版支持以下三种服务类型:
object_storage:对象存储token_service:认证服务alarm_service:告警服务
页面文案使用中文:
- 对象存储
- 认证服务
- 告警服务
数据模型
顶层公共字段
所有第三方服务共享以下字段:
name:服务名称,唯一标识type:服务类型description:描述enabled:是否启用config:按服务类型存储的结构化字段
推荐的数据结构如下:
{
"name": "minio_prod_main",
"type": "object_storage",
"description": "主对象存储",
"enabled": true,
"config": {
"endpoint": "http://10.0.0.49:9000",
"bucket": "myminio",
"access_key": "admin",
"secret_key": "password"
}
}
这种设计的关键点是:
- 顶层字段保持简单,便于列表展示和统一管理
- 类型差异收纳在
config中,避免一张平表容纳所有服务字段 - 后续增加新服务类型时,不需要推翻已有结构
类型字段
对象存储
字段:
endpointbucketaccess_keysecret_key
认证服务
字段:
get_token_urlusernamepasswordtenant_code
告警服务
字段:
put_message_urlusernamepasswordtenant_code
与现有模板参数的映射
为了兼容当前 agent 模板,第三方服务字段需要在预览和下发阶段映射回模板参数。
映射关系如下:
对象存储
config.endpoint->minio_endpointconfig.bucket->minio_bucketconfig.access_key->minio_access_keyconfig.secret_key->minio_secret_key
认证服务
config.get_token_url->external_get_token_urlconfig.tenant_code->tenant_code
告警服务
config.put_message_url->external_put_message_urlconfig.tenant_code->tenant_code
说明:
username和password在第一版中先作为结构化存储字段保留- 是否映射到模板参数,取决于具体模板是否已经定义对应参数
- 如果当前模板没有用到用户名和密码,这两个字段暂时只在后台维护,不强制写入模板参数
场景配置中的引用方式
场景配置不再直接保存第三方服务的 URL、密钥和租户字段,而是保存服务引用。
建议增加以下引用字段:
object_storage_reftoken_service_refalarm_service_ref
示例:
{
"object_storage_ref": "minio_prod_main",
"token_service_ref": "token_service_prod",
"alarm_service_ref": "alarm_center_prod"
}
这样做的好处是:
- 多个场景可以复用同一组基础服务
- 修改服务地址或凭据时,无需逐个调整场景
- 后台可以反查“某个服务被哪些场景引用”
- 场景配置页面更聚焦于业务场景本身,而不是堆满连接参数
预览与下发的数据流
生成最终 agent 配置时,数据流按以下顺序处理:
- 读取场景配置
- 解析场景中引用的第三方服务名称
- 加载对应第三方服务配置
- 按服务类型展开为模板参数
- 合并模板默认参数、场景参数、调试参数和第三方服务参数
- 生成最终配置预览或下发内容
参数优先级建议保持清晰:
- 模板默认参数
- 场景配置显式参数
- 第三方服务展开参数
- 调试参数覆盖
如果同名字段冲突,后面的层级覆盖前面的层级。
存储设计
后台当前 assets_repo 已经持久化模板、场景配置和调试参数。第一版建议延续这个模式,为第三方服务新增独立存储。
建议新增一类持久化对象:
- 表名可使用
integration_services
每条记录至少包含:
nametypedescriptionenabledconfig_jsoncreated_atupdated_at
其中 config_json 保存类型字段。
这样可以避免在数据库层为三类服务各建一张表,保持实现简单,同时保留后续扩展空间。
后端结构建议
建议在服务层新增一个明确模型,例如:
type ThirdPartyServiceAsset struct {
Name string
Type string
Description string
Enabled bool
Config map[string]any
}
如果后续需要更强约束,可以进一步拆出按类型的辅助结构,但第一版不必过度设计。
建议新增以下能力:
- 列表读取
- 单项读取
- 新建 / 编辑 / 删除
- 引用计数查询
- 按场景展开为模板参数
UI 设计
入口位置
主入口保持在:
基础配置 -> 第三方服务
列表页
列表页先展示最重要的信息,字段建议如下:
- 服务名称
- 服务类型
- 描述
- 地址摘要
- 启用状态
- 引用数量
地址摘要按类型生成:
- 对象存储:显示
endpoint / bucket - 认证服务:显示
get_token_url - 告警服务:显示
put_message_url
这样用户可以快速判断服务是做什么的,以及是否大致配置正确。
详情 / 编辑页
详情和编辑页分为两块:
-
基本信息
- 名称
- 类型
- 描述
- 启用状态
-
服务配置
- 根据服务类型显示不同字段
字段展示规则:
- 密码和
secret_key默认掩码显示 - 列表页不展示敏感字段
- 类型切换时动态切换表单字段
校验规则
通用校验
- 名称不能为空
- 名称必须唯一
- 类型不能为空
对象存储校验
endpoint必填bucket必填access_key必填secret_key必填
认证服务校验
get_token_url必填tenant_code可选username、password可选
告警服务校验
put_message_url必填tenant_code可选username、password可选
删除与引用约束
第三方服务被场景配置引用时,不应允许直接删除。
删除前需要检查:
- 是否有场景配置正在引用该服务
如果存在引用,应提示:
- 当前服务已被某些场景配置使用,不能删除
这与模板删除前检查引用的现有交互保持一致。
第一阶段实施范围
第一阶段只实现以下能力:
- 第三方服务的数据结构和存储
基础配置 -> 第三方服务列表与详情编辑- 场景配置对第三方服务的引用
- 配置预览与下发时的参数展开
- 删除前引用检查
后续扩展方向
本设计为后续扩展保留空间,但不在第一阶段实现:
- 新增更多服务类型,如 MQTT、Kafka、Webhook
- 服务连通性测试按钮
- 敏感字段加密存储
- 按客户或项目进行服务分组
- 服务变更审计
结论
第三方服务应当被视为一类可复用的基础配置,而不是模板参数的零散集合。
通过引入独立的第三方服务结构:
- 可以降低场景配置的重复录入
- 可以集中管理 URL、租户和凭据
- 可以让模板、场景和服务的职责分离
- 可以为后续更完整的配置治理打下基础
第一版只支持对象存储、认证服务、告警服务三类,已经足够覆盖当前项目里的真实需求,并且能与现有 agent 模板参数平滑兼容。