=== 0. 【严重】修复上一版引入的死锁(平台写路径全卡死)===
上一版把保留期读取写成 `GetRetentionSettings()`(内部 db.RLock()),
却在 `db.Lock()` 已持有的情况下调用(recordDelivery / RecordAudit 的裁剪路径)。
Go 的 sync.RWMutex **不可重入** → 第一次写投递历史/审计日志就永久死锁。
现象:登录 28 秒返回空(登录也要写审计)、所有写接口挂住。
go build / go vet / 之前的单测(不触发写路径)全都查不出来。
修法:
- 拆出 retentionFromDBLocked(db) / alertDeliveryRetentionLocked(db) /
auditLogRetentionLocked(db),调用方已持锁时用无锁版本
- upsertSettingLocked 里**不能**用 db.NextID()(内部 d.mu.Lock(),同样死锁),
改为锁内自算 max(id)+1
- 新增 retention_test.go:持写锁调用裁剪函数,2 秒超时未返回即判死锁
实测修复后:登录 103ms(原 28000ms)、panic/deadlock 命中 0。
=== 1. 平台数据保留期可配(系统设置 → 通用配置 → 日志保留时间)===
新增 GET/PUT /api/v1/settings/retention:
alertDeliveryDays 告警发送历史保留天数,默认 7(原写死"最近 50 条")
auditLogDays 审计日志保留天数,默认 90(原写死常量)
保存后立即按新策略裁剪一次,不必等下次触发。
校验:发送历史 1~365 天、审计 1~3650 天,超出返回明确中文原因(不是 500)。
注意与「Loki 日志保留期」区分:那个是部署级配置(组件部署 → 保留策略)。
=== 2. 发送历史:50 条硬上限 → 保留 7 天 ===
后端 Deliveries 接口原来写死 `len(out) < 50`,现在按保留期取(响应上限 500 可调),
标题改为「发送历史(保留 N 天)」,N 从设置里读。
=== 3. 菜单「日志服务」→「组件部署」===
=== 4. 分析页:去掉「全部命名空间」+ 改手动刷新 ===
- 移除「全部命名空间」选项:{namespace=~".+"} 要扫全集群(约 370GB/天),
一次分析几十秒,得不偿失;历史值 __all__ 也会被忽略并回退到策略/第一个 ns
- 筛选改为「选择值 / 已生效值」分离:切换命名空间或时间范围**不再自动查询**,
只把刷新按钮点亮并提示「筛选条件已改,点刷新生效」;
点一次才应用并取数。
原因:一次分析要跑多条 count_over_time,切一下下拉就重查一轮,
快速连点会把 Loki 打满(并发护栏 429),还拖慢别人。
=== 实测(9739c7c092e7)===
登录 103ms / token 273 字符
GET retention → {alertDeliveryDays:7, auditLogDays:90}
PUT 0 天 → 400「告警发送历史保留天数需在 1~365 之间」
平台日志 panic/deadlock 命中 0
go test ./... 全绿(含 2 个新死锁回归用例)
130 lines
3.8 KiB
Go
130 lines
3.8 KiB
Go
package services
|
|
|
|
import (
|
|
"encoding/base64"
|
|
"fmt"
|
|
"os"
|
|
"regexp"
|
|
"time"
|
|
|
|
"k8s.io/client-go/kubernetes"
|
|
"k8s.io/client-go/rest"
|
|
"k8s.io/client-go/tools/clientcmd"
|
|
"lokistack/models"
|
|
)
|
|
|
|
// resolveKubeconfig 取集群最终的 kubeconfig 文本(优先内存字段,其次磁盘文件)
|
|
func resolveKubeconfig(cluster *models.Cluster) (string, error) {
|
|
if cluster.KubeConfig != "" {
|
|
if cluster.IsKubeconfigEncrypted() {
|
|
plain := cluster.DecryptKubeconfig()
|
|
if plain == "" {
|
|
return "", fmt.Errorf("kubeconfig 解密失败(ENCRYPTION_KEY 是否变更?)")
|
|
}
|
|
return plain, nil
|
|
}
|
|
return cluster.KubeConfig, nil
|
|
}
|
|
if cluster.KubeConfigPath != "" {
|
|
data, err := os.ReadFile(cluster.KubeConfigPath)
|
|
if err != nil {
|
|
return "", fmt.Errorf("读取 kubeconfig 文件失败: %w", err)
|
|
}
|
|
return string(data), nil
|
|
}
|
|
return "", fmt.Errorf("集群未配置 kubeconfig")
|
|
}
|
|
|
|
// clusterRESTConfig 使用集群保存的 kubeconfig 构造原生 API Server 客户端配置。
|
|
func clusterRESTConfig(cluster *models.Cluster, timeout time.Duration) (*rest.Config, error) {
|
|
source, err := resolveKubeconfig(cluster)
|
|
if err != nil {
|
|
return nil, err
|
|
}
|
|
config, err := clientcmd.Load([]byte(source))
|
|
if err != nil {
|
|
return nil, fmt.Errorf("解析集群 kubeconfig 失败: %w", err)
|
|
}
|
|
overrides := &clientcmd.ConfigOverrides{}
|
|
if cluster.Context != "" {
|
|
overrides.CurrentContext = cluster.Context
|
|
}
|
|
result, err := clientcmd.NewNonInteractiveClientConfig(*config, config.CurrentContext, overrides, nil).ClientConfig()
|
|
if err != nil {
|
|
return nil, fmt.Errorf("构造 Kubernetes 客户端失败: %w", err)
|
|
}
|
|
result.Timeout = timeout
|
|
result.UserAgent = "lokistack"
|
|
return result, nil
|
|
}
|
|
|
|
func clusterClient(cluster *models.Cluster, timeout time.Duration) (kubernetes.Interface, error) {
|
|
config, err := clusterRESTConfig(cluster, timeout)
|
|
if err != nil {
|
|
return nil, err
|
|
}
|
|
return kubernetes.NewForConfig(config)
|
|
}
|
|
|
|
// BuildKubeconfigFromToken 用 API Server + Token 构造最小 kubeconfig
|
|
// 优先使用 CA 证书验证 TLS,仅在用户显式要求时跳过证书验证
|
|
// Parameters:
|
|
// - apiServer: Kubernetes API Server 地址,如 https://192.168.1.10:6443
|
|
// - token: 认证 Token
|
|
// - caCert: CA 证书 PEM 内容(可选)。若提供则嵌入证书数据进行 TLS 验证;
|
|
// 若为空且 skipTLSVerify=true 则跳过 TLS 验证;
|
|
// 若为空且 skipTLSVerify=false 则依赖系统 CA 池
|
|
// - skipTLSVerify: 是否跳过 TLS 证书验证(不建议在生产环境使用)
|
|
func BuildKubeconfigFromToken(apiServer, token, caCert string, skipTLSVerify bool) string {
|
|
var clusterBlock string
|
|
|
|
if caCert != "" {
|
|
// 嵌入 CA 证书进行安全的 TLS 验证
|
|
encodedCA := base64.StdEncoding.EncodeToString([]byte(caCert))
|
|
clusterBlock = fmt.Sprintf(`clusters:
|
|
- cluster:
|
|
certificate-authority-data: %s
|
|
server: %s
|
|
name: loki-cluster`, encodedCA, apiServer)
|
|
} else if skipTLSVerify {
|
|
// 用户显式要求跳过 TLS 验证(内网/自签证书场景)
|
|
clusterBlock = fmt.Sprintf(`clusters:
|
|
- cluster:
|
|
insecure-skip-tls-verify: true
|
|
server: %s
|
|
name: loki-cluster`, apiServer)
|
|
} else {
|
|
// 依赖系统 CA 池(不嵌入证书也不跳过验证)
|
|
clusterBlock = fmt.Sprintf(`clusters:
|
|
- cluster:
|
|
server: %s
|
|
name: loki-cluster`, apiServer)
|
|
}
|
|
|
|
return fmt.Sprintf(`apiVersion: v1
|
|
kind: Config
|
|
%s
|
|
contexts:
|
|
- context:
|
|
cluster: loki-cluster
|
|
user: loki-user
|
|
name: loki-context
|
|
current-context: loki-context
|
|
users:
|
|
- name: loki-user
|
|
user:
|
|
token: %s
|
|
`, clusterBlock, token)
|
|
}
|
|
|
|
var apiServerRe = regexp.MustCompile(`(?m)^\s*server:\s*(\S+)`)
|
|
|
|
// ExtractAPIServer 从 kubeconfig 文本提取 server 地址(展示用)
|
|
func ExtractAPIServer(kubeconfig string) string {
|
|
m := apiServerRe.FindStringSubmatch(kubeconfig)
|
|
if len(m) >= 2 {
|
|
return m[1]
|
|
}
|
|
return ""
|
|
}
|