服务器安全审计:90%高危漏洞藏于日志盲区
|
2026年6月,凌晨三点十七分,我蹲在IDC机房门口啃第三包速溶咖啡,膜都结了——不是没冲开,是搁那儿晾了四十八小时。门禁响了一声,没人进来,就那一下“嘀”,像服务器自己打了个喷嚏。我抬头看监控,角落里显示器上贴着张便利贴,字是同事潦草写的:“/var/log/nginx/access.log 丢了17小时”。不是删了,是没写。Nginx进程活着,access_log指令也还在配置里,但磁盘IO正常、inodes充裕、权限没变,就是不落日志。查了七遍。 跟托管方吵架吵到第七通电话时,对方技术总监终于说了句人话:“你们是不是开了logrotate,又改了rsyslog的local6接收端口?”我挂了电话,把椅子转过来又转回去,盯着防火墙规则第89行:-A INPUT -p tcp --dport 514 -s 10.2.3.0/24 -j ACCEPT。我们没配rsyslog,也没开UDP 514。但他们那边所有日志转发都走这个端口,且只认local6——而我们Nginx access_log明明配的是syslog:server=10.2.3.5:514,facility=local7。facilities不匹配,syslog silently drop。整整17小时,后台多了个陌生账号、首页标题被人改了、搜索引擎里出现了奇怪的词,全没进access.log。WAF日志有告警,但没留原始URI;CDN日志只记录了4xx,没存body;内网K8s审计日志里倒有一条“kubectl exec -it pod-xk8 -- /bin/sh”,时间戳卡在丢日志的头两小时——但pod-xk8早被删了,镜像层hash都不剩。 冷眼看着这事。不是不想骂,是骂完发现——骂错对象了。客户没动过Nginx配置,领导只问“有没有被黑”,插件作者说“你那个日志轮转脚本是不是把/var/log/nginx给chmod了”,我翻出来一看,是chown root:adm,没错。问题出在他们自研的运维中台——一个叫LogPipe的Java服务,部署在另一台老机器上,负责从syslog收日志再推ES。它有个bug:当facility值不在白名单(local0–local5)时,直接跳过,不报错、不重试、不记自身error.log。白名单配置文件藏在/usr/local/logpipe/conf/facility-whitelist.txt里,一行写着“# local6 and up are deprecated”。注释是真的,代码是假的——它真就把local6以上的全吞了。证书到期提醒邮件倒是准时发来了,就在丢日志的第13小时,标题是【SSL证书将于2026-06-28到期】,发件人地址后缀是@cloudops.internal。我们连这域名解析都还没配。 所以我说90%高危漏洞藏于日志盲区,不是瞎编比例,是那几天翻出来的事实。不是SQLi藏得深,是sqlmap打出来的payload根本没进access_log;不是撞库成功,是那几百次POST /api/v1/login全都进了nginx error_log,因为auth_basic_module抛了ERR_HTTP_AUTH_REQUIRED,但error_log里没存$remote_addr——默认就不存,要加log_format自定义。我们没加。扫描器报告里标红的“Apache Tomcat RCE”,其实是测试人员扫自己环境误操作触发的,但漏洞扫描报告PDF第12页写着“路径:/manager/html,状态码:200”,而实际访问日志里压根没这行——因为manager应用监听在8009,走AJP协议,Nginx只把/manager/反代过去,但access_log配置里exclude了AJP upstream日志。AJP流量根本不进access_log,连$upstream_addr都看不到。一条陌生注册记录出现在数据库audit表里,时间是凌晨1:03,来源IP显示127.0.0.1,但真实入口是某API网关的/callout接口——网关日志里只记了req_id和status,没记client_ip,因为它信任上游X-Forwarded-For,而上游早就被某个前端JS篡改过三次。 空调出风口挂着个塑料袋,不知道谁挂的,鼓着风一晃一晃。我盯着它想,所谓盲区,从来不是日志没生成,是日志被切片、被过滤、被重定向、被格式化掉关键字段、被不同组件用不同口径截断、被运维平台自动归档成不可grep的二进制压缩块……access_log里缺的那17小时,其实每分钟都在发生。只是平时有人巡检,这次巡检脚本恰好调用了curl -s https://logcheck.internal/api/health | grep OK,而那个API返回OK的前提是——ES集群存活、LogPipe服务存活、nginx.pid存在、且disk_used_percent < 92%。那天disk是91.7%,所以API返回OK,巡检通过。没人去看/tmp目录底下那个logrotate.lock文件,已经七天没被touch过。
文章配图,仅供参考 我不打算去改LogPipe的白名单。也不打算把所有facility都开一遍。明早先做三件事:第一,在/etc/logrotate.d/nginx末尾加一行postrotate kill -USR1 `cat /var/run/nginx.pid` 2>/dev/null || true;第二,给Nginx配置补上log_format full '$remote_addr - $remote_user [$time_local] "$request" $status $body_bytes_sent "$http_referer" "$http_user_agent" "$http_x_forwarded_for" $request_time $upstream_response_time'; 第三,把那张便利贴撕下来,拿荧光笔在背面写:“查/sys/fs/cgroup/memory/nginx.slice/memory.usage_in_bytes,看OOM killer有没有静默杀过worker”。做完这三件,如果还漏,就承认漏——不是能力问题,是日志链路太长,中间随便哪个环节打个喷嚏,你这边就收不到回声。现在,先把桌上那包结膜的速溶咖啡扔了。下一杯,得用现磨的,滤纸别堵。 (编辑:站长网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |

