Files
go-sms-V2/internal/service/uplink/consumer.go
T
Tory bb60d60529
ci / test (push) Canceled after 0s
ci / web-test (push) Canceled after 0s
ci / build (push) Canceled after 0s
ci / deploy-dev (push) Canceled after 0s
S4-D1/D2: C1 回调推送引擎+C2 上行自动拉黑——验收项「死信可查/拒收即拉黑」✅: ①C1=callback_task 队列表(迁移 v21,状态机 pending→sent/dead+attempt/next_retry_at/last_code)+PushWorker(2s 扫/批 100/并发 8/2^n 秒指数退避封顶 10min/10 次耗尽死信/UPDATE CAS 防竞态)+双挂点(report 终态首锁[Consumer+PairService,与 CMPP Deliver 同点同语义]+uplink 消费尾)+URL 门控 account_config.report_url/uplink_url(60s TTL 缓存,未配置零任务)+GET /ops/callback(列表+状态计数面板)/POST /ops/callback/:id/resend(casbin ops callback:read/write v21 所种)+前端回调管理页(ops-callback 路由系统管理组+api/callback.ts+状态面板/筛选/载荷展开/死信重派;matrix+guard 33 菜单显式更)+metrics callback_push_total{type,result}/blacklist_total+openapi v1.4.0;②C2=AutoBlacklister 等值词表(trim+lower 防误伤,默认 R/TD/退订/拒收;SystemConfig uplink.blacklist.keywords 可配 60s 刷新)→policy_blacklist(source=2/账号级/uk 幂等)+Redis Set 即时生效,拉黑不影响上行推送(需求原文);③真机全链六步实证(dev 中间件):回执 DELIVRD→detail 终态→HTTP 回调 JSON 送达(200/sent)+上行 R→拉黑(source=2+Redis=1)+推送送达+坏 URL→attempt10→dead→resend ISC:000→修复重投 sent+status_counts 面板;一次性探针 cmd/cbprobe 用后即删+冒烟数据全清;④单测 +13(callback 6[入队门控/载荷/状态机全链/并发批]+uplink 5[词表/配置覆盖/幂等缓存/消费链]+report 2[首锁一次/nil]);⑤门禁=build/vet/-race 40 包/lint 0/eslint0/vue-tsc0/vitest 148/build 全绿;迁移测试 v15..v21 两遍幂等+dev 实跑 v21;gofmt 存量 8 文件顺手清零(S2 遗留);⑥口径诚实标注:载荷无签名挂账/拦截终态 HTTP 未挂(CMPP 侧已有)/PushWorker 单实例 at-least-once;验收单 s4-d1d2-callback.md+CHANGELOG+memory-bank 回填
2026-11-16 11:19:55 +08:00

99 lines
3.2 KiB
Go

// consumer.go Day 49:sms-up 消费者——15 天窗口匹配下行明细,回填
// message_uplink.match_task_id(需求 2.5"只匹配 15 天内发送数据")。
// S4 落地:C1 上行推送(WithCallback→callback.Service,账号 uplink_url)+
// C2 自动拉黑(WithBlacklist→AutoBlacklister,blacklist.go);两者均不
// 阻断匹配回填主链,失败 Warn 吞错。
package uplink
import (
"context"
"encoding/json"
"time"
"go-sms/internal/model/entity"
"go-sms/internal/pkg/logger"
"go.uber.org/zap"
"gorm.io/gorm"
)
// MatchWindow 上行↔下行匹配窗口(15 天,需求 2.5)。
const MatchWindow = 15 * 24 * time.Hour
// UplinkEnqueuer 上行 HTTP 回调入队出口(S4·C1;装配层注入 *callback.Service)。
type UplinkEnqueuer interface {
EnqueueUplink(ctx context.Context, uplinkID, accountID int64,
destCode, srcMobile, content, recvAt string) error
}
// Consumer sms-up 消费者。
type Consumer struct {
db *gorm.DB
cb UplinkEnqueuer // S4·C1 上行推送(nil=跳过)
bl *AutoBlacklister // S4·C2 自动拉黑(nil=跳过)
}
// NewConsumer 构造。
func NewConsumer(db *gorm.DB) *Consumer { return &Consumer{db: db} }
// WithCallback 注入上行推送出口(链式,nil=跳过)。
func (c *Consumer) WithCallback(e UplinkEnqueuer) *Consumer {
c.cb = e
return c
}
// WithBlacklist 注入自动拉黑器(链式,nil=跳过)。
func (c *Consumer) WithBlacklist(b *AutoBlacklister) *Consumer {
c.bl = b
return c
}
// HandlePayload 消费入口(Kafka handler;载荷即 Event JSON)。
func (c *Consumer) HandlePayload(_ context.Context, value []byte) error {
var ev Event
if err := json.Unmarshal(value, &ev); err != nil {
return err // 非法载荷交由消费组重试→死信(与 submit 消费者同口径)
}
ctx := context.Background()
if err := c.MatchAndFill(ctx, &ev); err != nil {
return err
}
// S4·C2:拒收即拉黑(先于推送;拉黑不影响推送——需求原文语义)。
if c.bl != nil {
c.bl.MaybeBlock(ctx, ev.AccountID, ev.SrcMobile, ev.Content)
}
// S4·C1:上行推送(未配置 uplink_url 的账号零任务)。
if c.cb != nil {
if err := c.cb.EnqueueUplink(ctx, ev.UplinkID, ev.AccountID,
ev.DestCode, ev.SrcMobile, ev.Content, ev.RecvAt); err != nil {
logger.L().Warn("callback_uplink_enqueue_failed",
zap.Int64("uplink_id", ev.UplinkID), zap.Error(err))
}
}
return nil
}
// MatchAndFill 匹配并回填:同账号+同手机号、recv_at 前 15 天窗口内最近一条
// 下行明细 → match_task_id。幂等:仅覆写 match_task_id=0 的行。
func (c *Consumer) MatchAndFill(ctx context.Context, ev *Event) error {
recvAt, err := time.Parse(time.RFC3339, ev.RecvAt)
if err != nil {
return err
}
var detail entity.MessageDetail
q := c.db.WithContext(ctx).
Where("account_id = ? AND mobile = ? AND created_at BETWEEN ? AND ?",
ev.AccountID, ev.SrcMobile, recvAt.Add(-MatchWindow), recvAt).
Order("id DESC").Limit(1)
if err := q.First(&detail).Error; err != nil {
if err == gorm.ErrRecordNotFound {
return nil // 窗口内无下行:保留 match_task_id=0(未匹配,页面可筛)
}
return err
}
return c.db.WithContext(ctx).
Model(&entity.MessageUplink{}).
Where("id = ? AND match_task_id = 0", ev.UplinkID).
Update("match_task_id", detail.TaskID).Error
}