Sakurasan
c39c3e7da4
- 上游 429 的 Retry-After 转成渠道冷却时长（夹在 10 分钟内；比默认值短则不缩短， 否则 1s 就把坏渠道放回轮转）。失败计数改由 proxyOne 就地报——只有它读得到响应头。 - 故障转移时间预算 OT_PROXY_FAILOVER_BUDGET（默认 30s）：只约束第二个及以后的渠道， 首个不受限（长回答本就要跑几分钟），但坏渠道不再把客户端拖到 N×timeout。 - 流式空闲心跳 OT_PROXY_STREAM_HEARTBEAT（默认 15s）：补一行 SSE 注释 `: ping`， 防止 nginx/Cloudflare 的空闲超时掐掉长思考。心跳与正文共用一把写的锁， gin 的 ResponseWriter 不是并发安全的；注释行不进转换也不计费。 - 渠道观测：GET /api/v1/admin/channels/stats?window=5m|1h|6h|24h|7d 聚合请求量、 成功率、P50/P95/max 延迟、成本与 top_errors；分位只取成功样本，canceled（客户端 主动断开）不计入渠道错误率。渠道页桌面表格加「近N小时」列、移动端加同内容条， 顶部可切窗口。 - 修一个让统计瞎掉的归因问题：全部渠道失败时 recordError 传的是 nil， usage_logs 里 channel_id=0，这类失败在渠道维度完全看不见。改为归到最后一个 真正试过的渠道。 - 模型定价与元数据：Model 新增 cache_write_price（0 则回退输入价×1.25，可显式配 Anthropic 1h 的 ×2）、context_length 与 supports_tools/vision/reasoning； finishUsage 走 CacheWritePriceOr()。/v1/models 叠加用户与密钥白名单过滤 （原来会把限制外的模型名直接泄漏在列表里）并返回元数据，价格不外泄。 - /v1/models 的 Anthropic 分支原是死代码：协议只按路径判，而两种客户端共用这个路径。 改为按 x-api-key / anthropic-version 头判，OpenAI SDK 从不发这两个头，互不影响。 - NewGateway 的十个位置参数换成 Options 结构体（三个 Duration 两个 int，传错编译期发现不了）。 新增 6 个用例：Retry-After 两种写法与夹顶、重试预算截止、空闲心跳出帧、 /v1/models 过滤与双形状、缓存写价两条路径、失败归因。
282 lines
13 KiB
Go
282 lines
13 KiB
Go
// Package store 数据模型与仓储层（GORM）。
|
||
// 字段设计对应 PLANNING.md §6：金额/价格 numeric(20,8)，token bigint，时间 UTC。
|
||
package store
|
||
|
||
import (
|
||
"regexp"
|
||
"strings"
|
||
"time"
|
||
)
|
||
|
||
// 角色 / 状态枚举（字符串存库，便于阅读与迁移）
|
||
const (
|
||
RoleUser = "user"
|
||
RoleAdmin = "admin"
|
||
|
||
UserStatusActive = "active"
|
||
UserStatusDisabled = "disabled"
|
||
|
||
KeyStatusActive = "active"
|
||
KeyStatusRevoked = "revoked"
|
||
|
||
ChannelProviderOpenAI = "openai"
|
||
ChannelProviderAnthropic = "anthropic"
|
||
ChannelProviderCompatible = "compatible"
|
||
ChannelHealthHealthy = "healthy"
|
||
ChannelHealthDegraded = "degraded"
|
||
ChannelHealthCooldown = "cooldown"
|
||
|
||
// 渠道原生支持的协议格式
|
||
FormatChat = "chat" // OpenAI Chat Completions
|
||
FormatResponses = "responses" // OpenAI Responses API
|
||
FormatMessages = "messages" // Anthropic Messages
|
||
|
||
UsageStatusSuccess = "success"
|
||
UsageStatusError = "error"
|
||
UsageStatusCanceled = "canceled"
|
||
|
||
BalanceTypeRecharge = "recharge"
|
||
BalanceTypeUsage = "usage"
|
||
BalanceTypeRefund = "refund"
|
||
BalanceTypeAdminAdjust = "admin_adjust"
|
||
|
||
RechargeStatusPending = "pending"
|
||
RechargeStatusCredited = "credited"
|
||
RechargeStatusRejected = "rejected"
|
||
RechargeMethodManual = "manual"
|
||
RechargeMethodOnline = "online"
|
||
)
|
||
|
||
// User 用户（PLANNING §6.1）
|
||
type User struct {
|
||
ID uint64 `gorm:"primaryKey;autoIncrement" json:"id"`
|
||
Username string `gorm:"uniqueIndex;size:64;not null" json:"username"`
|
||
Email string `gorm:"uniqueIndex;size:255;not null" json:"email"`
|
||
PasswordHash string `gorm:"size:255;not null" json:"-"`
|
||
Role string `gorm:"size:16;not null;default:user" json:"role"`
|
||
Balance float64 `gorm:"type:numeric(20,8);not null;default:0" json:"balance"`
|
||
Status string `gorm:"size:16;not null;default:active" json:"status"`
|
||
AllowedModels []string `gorm:"type:jsonb;serializer:json" json:"allowed_models,omitempty"` // 用户级模型白名单(空=不限制)
|
||
DeniedModels []string `gorm:"type:jsonb;serializer:json" json:"denied_models,omitempty"` // 用户级模型黑名单
|
||
InviteCode *string `json:"invite_code,omitempty"`
|
||
LastLoginAt *time.Time `json:"last_login_at,omitempty"`
|
||
CreatedAt time.Time `json:"created_at"`
|
||
UpdatedAt time.Time `json:"updated_at"`
|
||
}
|
||
|
||
// APIKey 密钥（PLANNING §6.2）：库中只存 SHA-256 哈希 + 展示前缀
|
||
type APIKey struct {
|
||
ID uint64 `gorm:"primaryKey;autoIncrement" json:"id"`
|
||
UserID uint64 `gorm:"index;not null" json:"user_id"`
|
||
Name string `gorm:"size:64;not null" json:"name"`
|
||
KeyHash string `gorm:"uniqueIndex;size:64;not null" json:"-"`
|
||
KeyPrefix string `gorm:"size:32;not null" json:"key_prefix"`
|
||
QuotaTokensPerDay *int64 `json:"quota_tokens_per_day,omitempty"`
|
||
QuotaRequestsPerDay *int `json:"quota_requests_per_day,omitempty"`
|
||
AllowedModels []string `gorm:"type:jsonb;serializer:json" json:"allowed_models,omitempty"`
|
||
ExpiresAt *time.Time `json:"expires_at,omitempty"`
|
||
Status string `gorm:"size:16;not null;default:active" json:"status"`
|
||
LastUsedAt *time.Time `json:"last_used_at,omitempty"`
|
||
CreatedAt time.Time `json:"created_at"`
|
||
UpdatedAt time.Time `json:"updated_at"`
|
||
}
|
||
|
||
// Channel 上游渠道（PLANNING §6.3）
|
||
type Channel struct {
|
||
ID uint64 `gorm:"primaryKey;autoIncrement" json:"id"`
|
||
Name string `gorm:"uniqueIndex;size:64;not null" json:"name"`
|
||
Provider string `gorm:"size:16;not null" json:"provider"` // openai|anthropic|compatible（供应商/默认格式）
|
||
Formats []string `gorm:"type:jsonb;serializer:json" json:"formats,omitempty"` // 原生支持的协议格式 chat|responses|messages
|
||
BaseURL string `gorm:"size:255;not null" json:"base_url"`
|
||
BaseURLs map[string]string `gorm:"type:jsonb;serializer:json" json:"base_urls,omitempty"` // 分协议 base_url 覆盖（chat/responses/messages）
|
||
APIKeyEnc string `gorm:"size:1024;not null" json:"-"` // AES-GCM 密文
|
||
Weight int `gorm:"not null;default:1" json:"weight"`
|
||
Priority int `gorm:"not null;default:0" json:"priority"` // 数值小优先
|
||
TimeoutMS int `gorm:"not null;default:300000" json:"timeout_ms"`
|
||
MaxConcurrency int `gorm:"not null;default:16" json:"max_concurrency"`
|
||
HealthStatus string `gorm:"size:16;not null;default:healthy" json:"health_status"`
|
||
Enabled bool `gorm:"not null;default:true" json:"enabled"`
|
||
CreatedAt time.Time `json:"created_at"`
|
||
UpdatedAt time.Time `json:"updated_at"`
|
||
}
|
||
|
||
// FormatsEffective 返回渠道实际支持的原生协议；未显式配置时按 provider 推断。
|
||
func (c *Channel) FormatsEffective() []string {
|
||
if len(c.Formats) > 0 {
|
||
return c.Formats
|
||
}
|
||
switch c.Provider {
|
||
case ChannelProviderAnthropic:
|
||
return []string{FormatMessages}
|
||
case ChannelProviderOpenAI:
|
||
return []string{FormatChat, FormatResponses}
|
||
default: // compatible
|
||
return []string{FormatChat}
|
||
}
|
||
}
|
||
|
||
// versionSegRe 匹配末尾版本前缀，如 /v1、/v2、/v4。
|
||
var versionSegRe = regexp.MustCompile(`/v[0-9]+/?$`)
|
||
|
||
// UpstreamURL 按协议选 base_url（分协议覆盖优先），再按版本前缀拼资源路径（path 不含 /v1）。
|
||
// - proto 有 BaseURLs 覆盖时用覆盖值，否则用主 BaseURL
|
||
// - base 已以资源路径结尾 → 原样
|
||
// - base 含版本前缀(如 /v1、/v4) → base + path
|
||
// - 否则 → base + /v1 + path（默认补 OpenAI/Anthropic 的 /v1）
|
||
func (c *Channel) UpstreamURL(proto, path string) string {
|
||
base := c.BaseURL
|
||
if len(c.BaseURLs) > 0 && c.BaseURLs[proto] != "" {
|
||
base = c.BaseURLs[proto]
|
||
}
|
||
base = strings.TrimRight(base, "/")
|
||
if base == "" {
|
||
return path
|
||
}
|
||
if strings.HasSuffix(base, path) {
|
||
return base
|
||
}
|
||
if versionSegRe.MatchString(base) {
|
||
return base + path
|
||
}
|
||
return base + "/v1" + path
|
||
}
|
||
|
||
// Model 全局模型 + 定价（PLANNING §6.4，价格按每百万 token，USD）
|
||
type Model struct {
|
||
ID uint64 `gorm:"primaryKey;autoIncrement" json:"id"`
|
||
Name string `gorm:"uniqueIndex;size:128;not null" json:"name"`
|
||
InputPrice float64 `gorm:"type:numeric(20,8);not null;default:0" json:"input_price"`
|
||
OutputPrice float64 `gorm:"type:numeric(20,8);not null;default:0" json:"output_price"`
|
||
CacheReadPrice float64 `gorm:"type:numeric(20,8);not null;default:0" json:"cache_read_price"`
|
||
// 缓存写价（每百万 token）。为 0 时按输入价 ×1.25 计（Anthropic 5m 口径），
|
||
// 显式配置它才能支持 1h 缓存（×2）这类不同倍率。
|
||
CacheWritePrice float64 `gorm:"type:numeric(20,8);not null;default:0" json:"cache_write_price"`
|
||
ContextLength int `gorm:"not null;default:0" json:"context_length"` // 上下文窗口（token），0=未知
|
||
SupportsTools bool `gorm:"not null;default:false" json:"supports_tools"`
|
||
SupportsVision bool `gorm:"not null;default:false" json:"supports_vision"`
|
||
SupportsReasoning bool `gorm:"not null;default:false" json:"supports_reasoning"`
|
||
Enabled bool `gorm:"not null;default:true" json:"enabled"`
|
||
Sort int `gorm:"not null;default:0" json:"sort"`
|
||
CreatedAt time.Time `json:"created_at"`
|
||
UpdatedAt time.Time `json:"updated_at"`
|
||
}
|
||
|
||
// CacheWritePriceOr 返回缓存写价；未配置时回退到输入价×1.25（Anthropic 5m 口径）。
|
||
func (m *Model) CacheWritePriceOr() float64 {
|
||
if m.CacheWritePrice > 0 {
|
||
return m.CacheWritePrice
|
||
}
|
||
return m.InputPrice * 1.25
|
||
}
|
||
|
||
// ChannelModelBinding 渠道↔模型绑定（多对多，PLANNING §6.4）
|
||
type ChannelModelBinding struct {
|
||
ID uint64 `gorm:"primaryKey;autoIncrement" json:"id"`
|
||
ChannelID uint64 `gorm:"index:idx_ch_model,unique;not null" json:"channel_id"`
|
||
ModelID uint64 `gorm:"index:idx_ch_model,unique;not null" json:"model_id"`
|
||
UpstreamModel string `gorm:"size:255;not null" json:"upstream_model"`
|
||
Weight int `gorm:"not null;default:1" json:"weight"`
|
||
Channel Channel `gorm:"foreignKey:ChannelID" json:"-"`
|
||
Model Model `gorm:"foreignKey:ModelID" json:"-"`
|
||
}
|
||
|
||
// UsageLog 请求级用量明细（PLANNING §6.5）
|
||
type UsageLog struct {
|
||
ID uint64 `gorm:"primaryKey;autoIncrement" json:"id"`
|
||
RequestID string `gorm:"size:128" json:"request_id"` // 上游 request id
|
||
TraceID string `gorm:"size:64;index" json:"trace_id"`
|
||
UserID uint64 `gorm:"index:idx_user_created;not null" json:"user_id"`
|
||
KeyID uint64 `json:"key_id"`
|
||
ChannelID uint64 `json:"channel_id"`
|
||
ModelID uint64 `json:"model_id"`
|
||
ModelName string `gorm:"size:128" json:"model_name"`
|
||
Protocol string `gorm:"size:32" json:"protocol"` // responses|chat|messages
|
||
InputTokens int64 `json:"input_tokens"`
|
||
OutputTokens int64 `json:"output_tokens"`
|
||
CacheReadTokens int64 `json:"cache_read_tokens"`
|
||
CacheCreationTokens int64 `json:"cache_creation_tokens"`
|
||
InputPrice float64 `gorm:"type:numeric(20,8)" json:"input_price"` // 快照
|
||
OutputPrice float64 `gorm:"type:numeric(20,8)" json:"output_price"` // 快照
|
||
CacheReadPrice float64 `gorm:"type:numeric(20,8)" json:"cache_read_price"` // 快照
|
||
Cost float64 `gorm:"type:numeric(20,8)" json:"cost"`
|
||
LatencyMS int `json:"latency_ms"`
|
||
Status string `gorm:"size:16;not null" json:"status"`
|
||
ErrorCode *string `json:"error_code,omitempty"`
|
||
RawRequest string `gorm:"type:text" json:"raw_request"` // 客户端原始请求体（未转换）
|
||
RawResponse string `gorm:"type:text" json:"raw_response"` // 上游原始响应（未转换；流式为全部 SSE 事件）
|
||
CreatedAt time.Time `gorm:"index" json:"created_at"`
|
||
}
|
||
|
||
// UsageDaily 日粒度预聚合（PLANNING §6.6）
|
||
type UsageDaily struct {
|
||
ID uint64 `gorm:"primaryKey;autoIncrement" json:"id"`
|
||
UserID uint64 `gorm:"index:idx_daily_user_model,unique" json:"user_id"`
|
||
ModelID uint64 `gorm:"index:idx_daily_user_model,unique" json:"model_id"`
|
||
Date string `gorm:"size:10;index:idx_daily_user_model,unique" json:"date"` // YYYY-MM-DD (UTC)
|
||
Requests int64 `json:"requests"`
|
||
InputTokens int64 `json:"input_tokens"`
|
||
OutputTokens int64 `json:"output_tokens"`
|
||
CacheReadTokens int64 `json:"cache_read_tokens"`
|
||
Cost float64 `gorm:"type:numeric(20,8)" json:"cost"`
|
||
}
|
||
|
||
// RechargeOrder 充值订单（PLANNING §6.7，预留：首版不做充值）
|
||
type RechargeOrder struct {
|
||
ID uint64 `gorm:"primaryKey;autoIncrement" json:"id"`
|
||
UserID uint64 `gorm:"index;not null" json:"user_id"`
|
||
Amount float64 `gorm:"type:numeric(20,8);not null" json:"amount"`
|
||
Status string `gorm:"size:16;not null;default:pending" json:"status"`
|
||
Method string `gorm:"size:16;not null;default:manual" json:"method"`
|
||
TransactionID string `gorm:"size:128" json:"transaction_id,omitempty"`
|
||
ReviewedBy *uint64 `json:"reviewed_by,omitempty"`
|
||
ReviewedAt *time.Time `json:"reviewed_at,omitempty"`
|
||
Remark string `gorm:"size:512" json:"remark,omitempty"`
|
||
CreatedAt time.Time `json:"created_at"`
|
||
UpdatedAt time.Time `json:"updated_at"`
|
||
}
|
||
|
||
// BalanceLog 余额流水（PLANNING §6.8，幂等：ref_id + type 唯一）
|
||
type BalanceLog struct {
|
||
ID uint64 `gorm:"primaryKey;autoIncrement" json:"id"`
|
||
UserID uint64 `gorm:"index:idx_balance_user;not null" json:"user_id"`
|
||
Change float64 `gorm:"type:numeric(20,8);not null" json:"change"`
|
||
BalanceAfter float64 `gorm:"type:numeric(20,8);not null" json:"balance_after"`
|
||
Type string `gorm:"size:16;not null" json:"type"`
|
||
RefID string `gorm:"size:128;index:idx_balance_ref,unique" json:"ref_id"`
|
||
Remark string `gorm:"size:512" json:"remark,omitempty"`
|
||
CreatedAt time.Time `json:"created_at"`
|
||
}
|
||
|
||
// Passkey WebAuthn 凭据（passkey 绑定/登录）
|
||
type Passkey struct {
|
||
ID uint64 `gorm:"primaryKey;autoIncrement" json:"id"`
|
||
UserID uint64 `gorm:"index;not null" json:"user_id"`
|
||
Name string `gorm:"size:64" json:"name"`
|
||
CredentialID []byte `gorm:"size:255;not null" json:"-"` // credential.ID
|
||
Credential []byte `gorm:"type:blob;not null" json:"-"` // json.Marshal(webauthn.Credential)
|
||
CreatedAt time.Time `json:"created_at"`
|
||
}
|
||
|
||
// SystemConfig 系统配置（PLANNING §6.9）
|
||
type SystemConfig struct {
|
||
Key string `gorm:"primaryKey;size:64" json:"key"`
|
||
Value string `gorm:"type:jsonb;not null" json:"value"`
|
||
}
|
||
|
||
// AllModels 迁移顺序（外键依赖在后）
|
||
func AllModels() []any {
|
||
return []any{
|
||
&User{},
|
||
&APIKey{},
|
||
&Channel{},
|
||
&Model{},
|
||
&ChannelModelBinding{},
|
||
&UsageLog{},
|
||
&UsageDaily{},
|
||
&RechargeOrder{},
|
||
&BalanceLog{},
|
||
&Passkey{},
|
||
&SystemConfig{},
|
||
}
|
||
}
|