linux日志分析研究

linux日志分析研究Linux日志系统日志对于系统的安全来说非常重要，它记录了系统每天发生的各种各样的事情，用户可以通过它来检查错误发生的原因，或者寻找受到攻击时攻击者留下的痕迹。日志主要的功能是审计和监测。它还可以实时地监测系统状态，监测和追踪侵入者。RedHatLinux常见的日志文件和常用命令：成功地管理任何系统的关键之一，是要知道系统中正在发生什么事。Linux中提供了异常日志，并且日志的细节是可配置的。Linux日志都以明文形式存储，所以用户不需要特殊的工具就可以搜索和阅读它们。还可以编写脚本，来扫描这些日志，并基于它们的内容去自动执行某些功能。Linux日志存储在/var/log目录中。这里有几个由系统维护的日志文件，但其他服务和程序也可能会把它们的日志放在这里。大多数日志只有root账户才可以读，不过修改文件的访问权限就可以让其他人可读。成功地管理任何系统的关键之一，是要知道系统中正在发生什么事。Linux中提供了异常日志，并且日志的细节是可配置的。Linux日志都以明文形式存储，所以用户不需要特殊的工具就可以搜索和阅读它们。还可以编写脚本，来扫描这些日志，并基于它们的内容去自动执行某些功能。Linux日志存储在/var/log目录中。这里有几个由系统维护的日志文件，但其他服务和程序也可能会把它们的日志放在这里。大多数日志只有root账户才可以读，不过修改文件的访问权限就可以让其他人可读。?RedHatLinux常用的日志文件RedHatLinux常见的日志文件详述如下/var/log/boot.log该文件记录了系统在引导过程中发生的事件，就是Linux系统开机自检过程显示的信息。/var/log/cron该日志文件记录crontab守护进程crond所派生的子进程的动作，前面加上用户、登录时间和PID，以及派生出的进程的动作。CMD的一个动作是cron派生出一个调度进程的常见情况。REPLACE（替换）动作记录用户对它的cron文件的更新，该文件列出了要周期性执行的任务调度。RELOAD动作在REPLACE动作后不久发生，这意味着cron注意到一个用户的cron文件被更新而cron需要把它重新装入内存。该文件可能会查到一些反常的情况。/var/log/maillog该日志文件记录了每一个发送到系统或从系统发出的电子邮件的活动。它可以用来查看用户使用哪个系统发送工具或把数据发送到哪个系统。下面是该日志文件的片段：Sep417:23:52UNIXsendmail[1950]:g849Npp01950:from=root,size=25,class=0,nrcpts=1,msgid=[e-mail],relay=root@localhostSep417:23:55UNIXsendmail[1950]:g849Npp01950:to=[e-mail],ctladdr=root(0/0),delay=00:00:04,xdelay=00:00:03,mailer=esmtp,pri=30025,relay=fcceec.net.[10.152.8.2],dsn=2.0.0,stat=Sent(Messagequeued)/var/log/messages该日志文件是许多进程日志文件的汇总，从该文件可以看出任何入侵企图或成功的入侵。如以下几行：Sep308:30:17UNIXlogin[1275]:FAILEDLOGIN2FROM(null)FORsuying,AuthenticationfailureSep417:40:28UNIX--suying[2017]:LOGINONpts/1BYsuyingFROMfcceec.:39UNIXsu(pam_unix)[2048]:sessionopenedforuserrootbysuying(uid=999)该文件的格式是每一行包含日期、主机名、程序名，后面是包含PID或内核标识的方括号、一个冒号和一个空格，最后是消息。该文件有一个不足，就是被记录的入侵企图和成功的入侵事件，被淹没在大量的正常进程的记录中。但该文件可以由/etc/syslog文件进行定制。由/etc/syslog.conf配置文件决定系统如何写入/var/messages。有关如何配置/etc/syslog.conf文件决定系统日志记录的行为，将在后面详细叙述。/var/log/syslog默认RedHatLinux不生成该日志文件，但可以配置/etc/syslog.conf让系统生成该日志文件。它和/etc/log/messages日志文件不同，它只记录警告信息，常常是系统出问题的信息，所以更应该关注该文件。要让系统生成该日志文件，在/etc/syslog.conf文件中加上：*.warning/var/log/syslog该日志文件能记录当用户登录时login记录下的错误口令、Sendmail的问题、su命令执行失败等信息。下面是一条记录：Sep616:47:52UNIXlogin(pam_unix)[2384]:checkpass;userunknown/var/log/secure该日志文件记录与安全相关的信息。该日志文件的部分内容如下：Sep416:05:09UNIXxinetd[711]:START:ftppid=1815from=127.0.0.1Sep416:05:09UNIXxinetd[1815]:USERID:ftpOTHER:rootSep416:07:24UNIXxinetd[711]:EXIT:ftppid=1815duration=135(sec)Sep416:10:05UNIXxinetd[711]:START:ftppid=1846from=127.0.0.1Sep416:10:05UNIXxinetd[1846]:USERID:ftpOTHER:rootSep416:16:26UNIXxinetd[711]:EXIT:ftppid=1846duration=381(sec)Sep417:40:20UNIXxinetd[711]:START:telnetpid=2016from=10.152.8.2/var/log/lastlog该日志文件记录最近成功登录的事件和最后一次不成功的登录事件，由login生成。在每次用户登录时被查询，该文件是二进制文件，需要使用lastlog命令查看，根据UID排序显示登录名、端口号和上次登录时间。如果某用户从来没有登录过，就显示为**Neverloggedin**。该命令只能以root权限执行。简单地输入lastlog命令后就会看到类似如下的信息：UsernamePortFromLatestroottty2TueSep308:32:27+08002002bin**Neverloggedin**daemon**Neverloggedin**adm**Neverloggedin**lp**Neverloggedin**sync**Neverloggedin**shutdown**Neverloggedin**halt**Neverloggedin**mail**Neverloggedin**news**Neverloggedin**uucp**Neverloggedin**operator**Neverloggedin**games**Neverloggedin**gopher**Neverloggedin**ftpftpUNIXTueSep314:49:04+08002002nobody**Neverloggedin**nscd**Neverloggedin**mailnull**Neverloggedin**ident**Neverloggedin**rpc**Neverloggedin**rpcuser**Neverloggedin**xfs**Neverloggedin**gdm**Neverloggedin**postgres**Neverloggedin**apache**Neverloggedin**lzytty2MonJul1508:50:37+08002002suyingtty2TueSep308:31:17+08002002系统账户诸如bin、daemon、adm、uucp、mail等决不应该登录，如果发现这些账户已经登录，就说明系统可能已经被入侵了。若发现记录的时间不是用户上次登录的时间，则说明该用户的账户已经泄密了。/var/log/wtmp该日志文件永久记录每个用户登录、注销及系统的启动、停机的事件。因此随着系统正常运行时间的增加，该文件的大小也会越来越大，增加的速度取决于系统用户登录的次数。该日志文件可以用来查看用户的登录记录，last命令就通过访问这个文件获得这些信息，并以反序从后向前显示用户的登录记录，last也能根据用户、终端tty或时间显示相应的记录。命令last有两个可选参数：last-u用户名显示用户上次登录的情况。last-t天数显示指定天数之前的用户登录情况。/var/run/utmp该日志文件记录有关当前登录的每个用户的信息。因此这个文件会随着用户登录和注销系统而不断变化，它只保留当时联机的用户记录，不会为用户保留永久的记录。系统中需要查询当前用户状态的程序，如who、w、users、finger等就需要访问这个文件。该日志文件并不能包括所有精确的信息，因为某些突发错误会终止用户登录会话，而系统没有及时更新utmp记录，因此该日志文件的记录不是百分之百值得信赖的。以上提及的3个文件（/var/log/wtmp、/var/run/utmp、/var/log/lastlog）是日志子系统的关键文件，都记录了用户登录的情况。这些文件的所有记录都包含了时间戳。这些文件是按二进制保存的，故不能用less、cat之类的命令直接查看这些文件，而是需要使用相关命令通过这些文件而查看。其中，utmp和wtmp文件的数据结构是一样的，而lastlog文件则使用另外的数据结构，关于它们的具体的数据结构可以使用man命令查询。每次有一个用户登录时，login程序在文件lastlog中查看用户的UID。如果存在，则把用户上次登录、注销时间和主机名写到标准输出中，然后login程序在lastlog中记录新的登录时间，打开utmp文件并插入用户的utmp记录。该记录一直用到用户登录退出时删除。utmp文件被各种命令使用，包括who、w、users和finger。下一步，login程序打开文件wtmp附加用户的utmp记录。当用户登录退出时，具有更新时间戳的同一utmp记录附加到文件中。wtmp文件被程序last使用。/var/log/xferlog该日志文件记录FTP会话，可以显示出用户向FTP服务器或从服务器拷贝了什么文件。该文件会显示用户拷贝到服务器上的用来入侵服务器的恶意程序，以及该用户拷贝了哪些文件供他使用。该文件的格式为：第一个域是日期和时间，第二个域是下载文件所花费的秒数、远程系统名称、文件大小、本地路径名、传输类型（a：ASCII，b：二进制）、与压缩相关的标志或tar，或_（如果没有压缩的话）、传输方向（相对于服务器而言：i代表进，o代表出）、访问模式（a：匿名，g：输入口令，r：真实用户）、用户名、服务名（通常是ftp）、认证方法（l：RFC931，或0），认证用户的ID或*。下面是该文件的一条记录：WedSep408:14:0320021UNIX275531/var/ftp/lib/libnss_files-2.2.2.sob_oa-root@UNIXftp0*c/var/log/kernlogRedHatLinux默认没有记录该日志文件。要启用该日志文件，必须在/etc/syslog.conf文件中添加一行：kern.*/var/log/kernl