站长评论失焦?分布式事务视角下的技术理性
|
文章配图,仅供参考 前年11月那个周三,凌晨两点十七分,我正盯着WAF的访问日志里那段重复出现的POST /comment/api/submit?_t=1605637023——参数带了base64嵌套两次再加了个URL编码尾巴,但payload头尾都空着,像有人刻意把刀鞘磨钝了塞进来。后台没报错,Redis缓存键正常刷新,MQ消费者也照常ACK。直到早上六点,客户截图甩进群:首页底部多出三行黑底白字,跳转链接指向一个被封了十年的老钓鱼站域名。不是挂马,没改文件系统,连Git钩子都没触发。就是评论提交成功页渲染时,从某个下游服务返回的HTML片段里,硬塞进了那段script标签。我扒了整个链路:前端埋点埋深了,comment-ui调用 comment-service,service又调用 user-profile(查昵称和头像)、content-audit(异步过审)、stat-collector(写埋点)。三个下游,三个事务边界。user-profile走MySQL主从,content-audit走Kafka+消费确认,stat-collector直接HTTP POST到第三方SaaS。问题出在audit那层:它收到评论后,先落Kafka,然后立即返回“已接收”,接着由后台消费者做文本识别。可那天消费者卡在某个OCR模型加载失败的死循环里,一直没commit offset。而上游service——也就是你猜怎么着?它没等audit结果就拼了最终响应体,直接把用户原始输入+昵称+默认头像URL喂给了前端模板引擎。中间那个“审核中”状态压根没透出接口。audit还在 backlog 里躺着,service已经 COMMITED;用户看到“提交成功”,搜索引擎爬虫当天就抓走了带script的静态快照。 跟托管方视频对线的时候,对方运维盯着屏幕右下角弹出的证书到期提醒,说:“你们接口没加验签啊,肯定是被人篡改了请求。”我摘了耳机,把椅子转过来又转回去,桌上的速溶咖啡结了一层膜,浮在褐色液体上,像凝固的胶水。我说:“你把那个WAF规则ID发我——rule_202011_cms_comment_xss_bypass,第4条,regex里写的‘’后面少了个i修饰符,只匹配小写。他们用的是。”他愣了两秒,说“哦”。电话里谁说了句“嗯”就没声了。门禁响了一声,是保洁推着车路过机房走廊。我没再开口。 站长吵得最凶的是“为什么没拦截”“为啥不强制审核后才回显”。但问题从来不在WAF或审核策略——在于整个链路根本没有定义“一致的可见性”。MySQL里的评论状态是pending,Kafka里是queued,前端UI里是success,搜索引擎缓存里是已发布。四份状态,三套事务语义,零个共识机制。你不能一边用最终一致性扛吞吐,一边要求所有环节同步呈现原子状态。这不是防护疏漏,是架构契约撕了——就像在TCP三次握手没完成前就开始发HTTP Body。 显示器上贴了张便利贴,写着“audit-consumer: restart if model load fail >3s”。那是我第二天上午补的,但忘了删掉旧逻辑里那个sleep(30)。空调出风口挂着个塑料袋,风一吹就鼓起来,像口风琴。事后看漏洞扫描报告,第87条写着“/comment/api/submit 接口未校验Referer且Content-Type宽松”,可这玩意儿拦不住任何事——真正的数据污染发生在事务交接的灰带里:Kafka未消费的消息、service内存里未失效的本地缓存、前端localStorage里那个本该被清掉的草稿副本。后台多了个陌生账号、首页标题被人改了、搜索引擎里出现了奇怪的词——全是同一个事务分裂后的不同切片,在各自时间线上独立坍缩。 我不觉得这是技术失败。只是把分布式事务当单体来编排的人,早晚得替每个跨网关调用去背锅。站长们评论失焦?他们盯着WAF日志骂规则不够狠,盯着CDN缓存骂没及时回源,盯着SEO骂爬虫太勤——但没人问一句:当你点击“发表”按钮那一刻,究竟有多少个系统同时做出了“这件事已完成”的判断?而它们凭什么要一致? 现在我把 audit-consumer 的重启阈值改成了 1.5s,并加了 health check 主动驱逐异常实例。另外,把 /comment/api/submit 的响应体强制降级为纯JSON,前端必须等 /comment/status/{id} 返回 verified 才渲染结果。暂时不敢动事务传播模式——Saga太重,TCC没人力,本地消息表又绕不开数据库锁。所以先干一件小事儿:下周找DBA要一份过去三个月的binlog,抽样比对comment表里的status字段更新时间戳,跟Kafka consumer group的lag metrics画个散点图。看看是不是真有那么一批“成功提交却永远不审核”的幽灵评论,在数据库里躺平,在搜索结果里开花,在站长们的截图里永生。 (编辑:站长网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |



