Linux入侵排查

<p style="text-indent:2em">当企业发生黑客入侵、系统崩溃或其它影响业务正常运行的安全事件时，急需第一时间进行处理，使企业的网络信息系统在最短时间内恢复正常工作，进一步查找入侵来源，还原入侵事故过程，同时给出解决方案与防范措施，为企业挽回或减少经济损失。 </p>
<p style="text-indent:2em">针对常见的攻击事件，结合工作中应急响应事件分析和解决的方法，总结了一些 Linux 服务器入侵排查的思路。</p>

## 一、账户安全
基本使用
```
用户信息文件 /etc/passwd
root:x:0:0:root:/root:/bin/bash
account:password:UID:GID:GECOS:directory:shell
用户名：密码：用户ID：组ID：用户说明：家目录：登陆之后的 shell
注意：
无密码只允许本机登陆，远程不允许登陆
/etc/passwd 任何用户都能查看，但仅有 root 用户可以更改
/usr/sbin/nologin和/bin/false 代表用户无法通过系统登录界面及ssh远程终端登陆，也无法通过su命令进行用户切换
除root用户家目录在/root目录外，其他可登陆普通用户家目录在 /home/用户名 ，特殊的无法登陆用户，如apache服务用户www-data，家目录在 /var/www
/bin/zsh 、/bin/bash 、 /bin/sh 都是常见的登陆shell，当然也会见到带/usr前缀的目录，例如/usr/bin/bash，可以在/etc/shells查看可以shell
```
```
影子文件 /etc/shadow
root:$6$oGs1PqhL2p3ZetrE$X7o7bzoouHQVSEmSgsYN5UD4.kMHx6qgbTqwNVC5oOAouXvcjQSt.Ft7ql1WpkopY0UV9ajBwUt1DpYxTCVvI/:16809:0:99999:7:::
用户名：加密密码：密码最后一次修改日期：两次密码的修改时间间隔：密码有效期：密码修改到期到的警告天数：密码过期之后的宽限天数：账号失效时间：保留
密码字段用 * 表示，表示这些用户没有设置密码（可能是系统用户，不允许登录）。
注意：
 /etc/shadow 仅root用户可读写
 /etc/shadow 并不是用户配置文件，如果仅把后门用户插入到此文件是无法生效的。
 密码有效期、密码修改到期的警告天数等策略可以为空，或默认的99999（无限制）
 加密后的用户密码，无法逆向破解的
```
入侵排查
```
1、查询特权用户特权用户(uid 为0) 
awk -F: '$3==0{print $1}' /etc/passwd
2、除root帐号外，是否有其他未知帐号存在sudo权限
more /etc/sudoers | grep -v "^#\|^$" | grep "ALL=(ALL"
3、禁用或删除多余及可疑的帐号
usermod -L user   禁用帐号，帐号无法登录，/etc/shadow第二栏为!开头 
userdel user      删除user用户 
userdel -r user   将删除user用户，并且将/home目录下的user目录一并删除 
useradd -m 用户名   创建带家目录的用户
useradd -m -s /bin/zsh 用户名   创建带家目录并指定shell的用户
4、常见命令
who     查看当前登录用户（tty本地登陆  pts远程登录） 
w       查看系统信息，想知道某一时刻用户的行为 
uptime  查看登陆多久、多少用户，负载
```

## 二、历史命令
Linux系统里，执行过命令的用户会在自己的家目录下，生成相应的历史命令记录文件 如.bash_history、.zsh_history 、.sh_history
```
打开各帐号目录下的 .bash_history 、.zsh_history，查看帐号的历史命令
cat /root/.*_history | more
cat /home/*/._history | more
注意：
主要分析是否有账户执行过恶意操作
当安全事件发生的时候，就可以通过查看每个用户所执行过的命令，来分析该用户是否有执行恶意命令，如果发现哪个用户执行过恶意命令，那么我们就可以锁定这个线索，去做下一步的排查
.bash_history 文件用于永久保存用户的历史命令记录
history 命令则是用于查看当前会话的命令历史记录。
```
## 三、异常端口
使用 netstat 网络连接命令，分析可疑端口、IP、PID
```
netstat -antpl

查看下 pid 所对应的进程文件路径
ls -l /proc/$PID/exe或 file /proc/$PID/exe（$PID 为对应的 pid 号）
```
## 四、异常进程
ps aux
```
字段讲解：
USER：表示进程所属的用户。
PID：表示进程的ID（即进程号）。
%CPU：表示进程使用的CPU资源百分比。
%MEM：表示进程使用的内存资源百分比。
VSZ：表示进程的虚拟内存大小（以KB为单位）。
RSS：表示进程的实际内存大小（以KB为单位）。
TTY：表示进程关联的TTY设备。
STAT：表示进程的状态，通常包括运行（R）、睡眠（S）、停止（T）、僵死（Z）等。
START：表示进程的启动时间。TIME：表示进程的累计CPU占用时间。
COMMAND：表示进程的命令名称和参数。
```
top
动态地显示系统中运行的进程信息
按 q 即可退出
```
运行以上命令，如果发现有名称不断变化的非授权进程占用大量系统CPU或内存资源时，则可能为恶意程序
确认该进程为恶意进程后，可以使用 
kill -9 PID   或使用防火墙限制进程外联
```
## 五、开机启动项
系统运行级别示意图：
| 运行级别 |                           含义                            |
| :------: | :-------------------------------------------------------: |
|    0     |                           关机                            |
|    1     | 单用户模式，可以想象为windows的安全模式，主要用于系统修复 |
|    2     |              不完全的命令行模式，不含NFS服务              |
|    3     |            完全的命令行模式，就是标准字符界面             |
|    4     |                         系统保留                          |
|    5     |                         图形模式                          |
|    6     |                          重启动                           |
```
查看运行级别命令
runlevel
systemctl get-default

设置运行级别:
/etc/inittab 是一个配置文件，通常用于 Unix 和类 Unix 系统，如 Linux。然而，需要注意的是，新版本的 Linux 发行版已经不再使用 /etc/inittab 文件来配置系统初始化和运行级别，而是使用 Systemd 或其他替代方案。
vi  /etc/inittab
id=3：initdefault  #系统开机后直接进入哪个运行级别

systemctl set-default <target>
0 ---  poweroff.target 或 runlevel0.target
1 ---  rescue.target 或 emergency.target
2 ---  没有
3 ---  multi-user.target
4 ---  没有
5 ---  graphical.target
6 ---  reboot.target 或 runlevel6.target
```
开机启动配置文件
ll /etc/rc*
```
/etc/rc.local
/etc/rc.d/rc[0~6].d
/etc/init.d

当我们需要开机启动自己的脚本时，只需要将可执行脚本丢在 /etc/init.d 目录下，然后在 /etc/rc.d/rc*.d 文件中建立软链接即可。
注：此中的 * 代表 0,1,2,3,4,5,6 这七个等级
ln -s /etc/init.d/sshd /etc/rc.d/rc3.d/S100ssh
此处sshd是具体服务的脚本文件，S100ssh是其软链接，S开头代表加载时自启动；如果是K开头的脚本文件，代表运行级别加载时需要关闭的。
```
## 六、定时任务
利用 crontab 创建计划任务
```
crontab创建计划任务
基本命令
crontab -l   列出某个用户cron服务的详细内容
crontab -u root -l  查看root用户的计划任务
Tips：默认编写的crontab文件会保存在 (/var/spool/cron/用户名 例如: /var/spool/cron/root
crontab -r   删除每个用户cront任务(谨慎：删除所有的计划任务)
crontab -e   使用编辑器编辑当前的crontab文件 
如：*/1 * * * * echo "hello world" >> /tmp/test.txt 每分钟写入文件
```
排查目录
```
/var/spool/cron/* 
/var/spool/anacron/*
/etc/crontab
/etc/cron.d/*
/etc/cron.daily/* 
/etc/cron.hourly/* 
/etc/cron.monthly/*
/etc/cron.weekly/
/etc/anacrontab
```
## 七、服务自启动
创建服务自启动的方法
```
第一种方法：创建systemd服务
/etc/systemd/system
vi /etc/systemd/system/test.service
内容：
vi /etc/systemd/system/test.service
[Unit]
Description=test
[Service]
ExecStart=/var/test/test.sh
[Install]
WantedBy=default.target
重新加载服务镜像
systemctl daemon-reload

第二种方法
crontab -e
@reboot /var/test/test.sh

第三种方法
/etc/init.d/ 目录本身并不直接定义这些脚本在哪个运行级别（Runlevel）下执行。相反，哪些服务在特定运行级别下启动或停止是由 /etc/rc.d/ 或 /etc/rc*.d/（* 代表不同的运行级别数字）目录中的符号链接决定的。
每个运行级别都有一个对应的目录，比如 /etc/rc1.d/、/etc/rc2.d/ 等，这些目录包含了指向 /etc/init.d/ 中服务脚本的符号链接。这些符号链接遵循特定的命名约定：
以 S 开头的链接代表在该运行级别启动的服务。例如，S01nginx 表示 nginx 服务在系统进入该运行级别时会被启动。
以 K 开头的链接代表在该运行级别停止的服务。例如，K99nginx 表示 nginx 服务在离开该运行级别时会被停止。
数字表示服务启动或停止的顺序。数字越小，服务越早启动或停止。

设置服务自启动命令：
update-rc.d ssh enable
systemctl enable ssh
```
排查
```
使用命令查看所有服务自动服务命令
systemctl list-unit-files --type=service | grep enable

从启动项中的自启动服务
ll /etc/rc*
```
八、检查异常文件
1、查看敏感目录，如/tmp目录下的文件，同时注意隐藏文件夹，以“..”为名的文件夹具有隐藏属性

2、得到发现WEBSHELL、远控木马的创建时间，如何找出同一时间范围内创建的文件？

可以使用find命令来查找，如 find /opt -iname "*" -atime 1 -type f 找出 /opt 下一天前访问过的文件
3、针对可疑文件可以使用 stat 进行创建修改时间。

4.chattr +i filename 锁定文件
也有的进程因为存在守护进程而无法删除，我们可以先把进程挂起，查杀守护进程后，再返回将进程删除。
5.针对可疑文件可以使用 stat 进行创建修改时间
八、检查系统日志
日志默认存放位置：/var/log/
查看日志配置情况：more /etc/rsyslog.conf
|     日志文件     |                             说明                             |
| :--------------: | :----------------------------------------------------------: |
|  /var/log/cron   |                 记录了系统定时任务相关的日志                 |
|  /var/log/cups   |                      记录打印信息的日志                      |
|  /var/log/dmesg  | 记录了系统在开机时内核自检的信息，也可以使用dmesg命令直接查看内核自检信息 |
| /var/log/mailog  |                         记录邮件信息                         |
| /var/log/message | 记录系统重要信息的日志。这个日志文件中会记录Linux系统的绝大多数重要信息，如果系统出现问题时，首先要检查的就应该是这个日志文件 |
|  /var/log/btmp   | 记录错误登录日志，这个文件是二进制文件，不能直接vi查看，而要使用lastb命令查看 |
| /var/log/lastlog | 记录系统中所有用户最后一次登录时间的日志，这个文件是二进制文件，不能直接vi，而要使用lastlog命令查看 |
|  /var/log/wtmp   | 永久记录所有用户的登录、注销信息，同时记录系统的启动、重启、关机事件。同样这个文件也是一个二进制文件，不能直接vi，而需要使用last命令来查看 |
|  /var/log/utmp   | 记录当前已经登录的用户信息，这个文件会随着用户的登录和注销不断变化，只记录当前登录用户的信息。同样这个文件不能直接vi，而要使用w,who,users等命令来查询 |
| /var/log/secure  | 记录验证和授权方面的信息，只要涉及账号和密码的程序都会记录，比如SSH登录，su切换用户，sudo授权，甚至添加用户和修改用户密码都会记录在这个日志文件中 |
日志分析技巧：
```
1、定位有多少IP在爆破主机的root帐号：    
grep "Failed password for root" /var/log/secure | awk '{print $11}' | sort | uniq -c | sort -nr | more

定位有哪些IP在爆破：
grep "Failed password" /var/log/secure|grep -E -o "(25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\.(25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\.(25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\.(25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)"|uniq -c

爆破用户名字典是什么？
grep "Failed password" /var/log/secure|perl -e 'while($_=<>){ /for(.*?) from/; print "$1\n";}'|uniq -c|sort -nr
 
2、登录成功的IP有哪些： 	
grep "Accepted " /var/log/secure | awk '{print $11}' | sort | uniq -c | sort -nr | more

登录成功的日期、用户名、IP：
grep "Accepted " /var/log/secure | awk '{print $1,$2,$3,$9,$11}'

3、增加一个用户kali日志：
Jul 10 00:12:15 localhost useradd[2382]: new group: name=kali, GID=1001
Jul 10 00:12:15 localhost useradd[2382]: new user: name=kali, UID=1001, GID=1001, home=/home/kali
, shell=/bin/bash
Jul 10 00:12:58 localhost passwd: pam_unix(passwd:chauthtok): password changed for kali
#grep "useradd" /var/log/secure

4、删除用户kali日志：
Jul 10 00:14:17 localhost userdel[2393]: delete user 'kali'
Jul 10 00:14:17 localhost userdel[2393]: removed group 'kali' owned by 'kali'
Jul 10 00:14:17 localhost userdel[2393]: removed shadow group 'kali' owned by 'kali'
# grep "userdel" /var/log/secure

5、su切换用户：
Jul 10 00:38:13 localhost su: pam_unix(su-l:session): session opened for user good by root(uid=0)

sudo授权执行:
sudo -l
Jul 10 00:43:09 localhost sudo:    good : TTY=pts/4 ; PWD=/home/good ; USER=root ; COMMAND=/sbin/shutdown -r now
```
```
发现大量爆破日志，可以统计一下
grep -o "Failed password" auth.log* | uniq -c
统计爆破用户
strings auth.log* | grep  "Failed password"  |  awk '{print $9}' | uniq -c
grep "Failed password" /var/log/auth*|perl -e 'while($_=<>){ /for(.*?) from/; print "$1\n";}'|uniq -c|sort -nr
发现存在两个用户都被爆破，查看登陆情况
strings auth.log* | grep  "Accepted" | awk '{print $1,$2,$3,$7,$9,$11}'
查看两个用户开始爆破的时间
strings auth.log* | grep  "Failed password" |uniq -c | grep zyr | head -n 2
strings auth.log* | grep  "Failed password" |uniq -c | grep wxiaoge | head -n 2
```

导航

最近文章

友情链接