
核心要点(TL;DR)
- 排查被黑服务器先查进程和网络连接,再查定时任务与启动项,最后分析日志。
- 使用ps aux、netstat、lsof等命令快速定位异常进程和端口。
- 检查crontab、systemd服务、rc.local等位置,清除持久化后门。
- 分析/var/log/auth.log、secure、messages等日志,追踪入侵来源。
痛点引入:服务器被黑,如何快速止血并溯源?
作为运维或站长,发现服务器被黑往往令人措手不及:网站被篡改、资源被挖矿、数据被窃取。慌乱中重启或重装可能丢失关键证据,导致无法根治。本文提供一套从进程、定时任务到日志的完整排查步骤,结合具体命令和检查清单,帮助你快速定位入侵痕迹,清除后门并加固系统。
第一步:检查异常进程与网络连接
攻击者通常会运行恶意进程(如挖矿、DDoS、后门)并开放端口。使用以下命令快速定位:
ps aux --sort=-%cpu | head -20查看CPU占用高的进程,注意异常名称或路径(如/tmp下的随机名)。netstat -tunlp或ss -tunlp查看监听端口,对比已知服务,发现陌生端口立即用lsof -i:端口定位进程。lsof -p PID查看进程打开的文件,确认是否指向可疑路径。ls -l /proc/PID/exe查看进程可执行文件的实际路径,若显示(deleted)可能已被删除但仍在运行。
发现可疑进程后,先kill -9 PID终止,再删除对应文件。注意备份样本以便后续分析。
第二步:排查定时任务与持久化后门
攻击者常通过定时任务、系统服务等实现持久化。检查以下位置:
crontab -l查看当前用户定时任务;cat /etc/crontab查看系统级任务;ls -la /etc/cron.d/ /etc/cron.hourly/ /etc/cron.daily/检查各目录;ls -la /var/spool/cron/查看所有用户任务。systemctl list-units --type=service --all查看所有服务,注意陌生服务名;systemctl status 服务名查看详情;检查/etc/systemd/system/下新增的.service文件。cat /etc/rc.local查看开机启动脚本;ls -la /etc/init.d/检查初始化脚本。cat ~/.bashrc ~/.bash_profile检查用户登录脚本是否被植入恶意命令。
清除时,删除恶意任务文件,并重启相关服务。建议使用grep -r “关键词” /etc/ 搜索可疑字符串。
第三步:分析系统与应用日志,追踪入侵来源
日志是溯源的关键。重点检查:
- 认证日志:
/var/log/auth.log(Debian/Ubuntu)或/var/log/secure(CentOS),使用grep “Failed password” /var/log/auth.log查找暴力破解记录,grep “Accepted”查看成功登录。 - 系统日志:
/var/log/syslog或/var/log/messages,关注异常服务启动、内核报错。 - Web日志:
/var/log/nginx/access.log或Apache日志,用grep -i “eval\|base64\|cmd=”查找可疑请求。 - 使用
last和lastb查看登录历史,who查看当前登录用户。
结合时间线分析,定位攻击入口(如弱密码、漏洞利用)。
第四步:检查文件与用户异常
攻击者可能创建隐藏文件或用户。执行:
find / -type f -mtime -7 -name “*.php” | head -50查找近期修改的文件(根据实际调整时间)。ls -la /tmp /var/tmp /dev/shm检查临时目录,攻击者常在此存放恶意文件。awk -F: ‘==0 {print }’ /etc/passwd检查UID为0的用户,除root外均为异常。cat /etc/passwd查看是否有新增用户;cat /etc/sudoers检查提权配置。
删除恶意文件,禁用异常用户。
第五步:清理与加固,防止二次入侵
完成排查后,彻底清除后门:终止恶意进程、删除恶意文件、清理定时任务和服务、修改所有密码(包括SSH、数据库、后台)。加固建议:
- 更新系统和软件补丁,修复已知漏洞。
- 配置防火墙,仅开放必要端口。
- 安装安全工具,如AegisX可实时监控进程、文件变动和登录行为,提供入侵检测与自动阻断。
- 定期备份数据,并检查日志。
行动建议:立即按照上述步骤排查,若发现复杂后门,建议寻求专业安全团队协助。
常见问题(FAQ)
服务器被黑后,第一步应该做什么?
立即隔离服务器,避免影响扩大。然后备份当前状态(如进程列表、网络连接、日志),再按进程、定时任务、日志的顺序排查。不要急于重启,以免丢失关键证据。
如何快速找到可疑进程?
使用ps aux或top查看CPU/内存占用高的进程,注意异常名称或路径;结合netstat -tunlp查看监听端口,lsof -p PID查看进程打开的文件,发现可疑文件立即用ls -l和stat查看创建时间。
定时任务里哪些地方容易藏后门?
除了crontab -l,还要检查/etc/crontab、/etc/cron.d/、/var/spool/cron/等目录,以及systemd服务(systemctl list-units --type=service)和/etc/rc.local。攻击者常在此写入恶意脚本实现持久化。
日志分析应该关注哪些文件?
重点查看/var/log/auth.log(或secure)中的登录失败和成功记录,/var/log/syslog或messages中的异常服务启动,以及Web日志(如access.log)中的可疑请求。使用grep过滤关键词如“Failed password”、“Accepted”。
清理后门后如何防止再次被黑?
更新系统和软件补丁,修改所有弱密码,禁用不必要的服务,配置防火墙限制访问,安装入侵检测工具(如AegisX),并定期检查日志和进程。