轻松搞定!使用Linux查询服务器日志指南 (linux查询服务器日志)

作为一名网站管理员,定期查询服务器日志是必不可少的工作之一。通过分析服务器日志,我们可以了解网站的访问情况、用户行为、异常情况等等,对于网站的运营和安全都起着至关重要的作用。而Linux作为一款开源的操作系统,在查询服务器日志方面也是相当强大和灵活的。

本文将为大家介绍使用Linux系统查询服务器日志的一些常用方法和技巧,帮助大家轻松搞定这项工作。

一、日志文件介绍

在正式介绍查询日志的方法前,我们先来简单了解一下常见的日志文件,包括:

1.访问日志:也称为访问记录,用于记录服务器的访问情况,包括访问时间、IP地址、访问页面、返回状态码等信息。通常存储在/var/log/nginx/access.log或者/var/log/apache2/access.log中。

2.错误日志:用于记录服务器的错误信息,包括PHP错误、数据库错误、404错误等。通常存储在/var/log/nginx/error.log或者/var/log/apache2/error.log中。

3.系统日志:用于记录系统的运行情况,包括系统启动、服务启动、内核信息、系统错误等。通常存储在/var/log/syslog中。

了解这些常见的日志文件,对于后续的查询工作会很有帮助。

二、常用查询方法

1.使用grep命令

grep命令是Linux系统和Unix系统中的一个强大的文本搜索工具,可以在文件中搜索指定的字符串,用于查询日志是非常方便的。比如我们想查询访问日志中所有404错误的记录,可以输入以下命令:

“`

grep “404” /var/log/nginx/access.log

“`

这个命令会从access.log文件中查找包含“404”的行,并将结果输出到屏幕上。

我们也可以结合一些其他的参数,来实现更复杂的查询或者输出结果。比如:

– 使用-n参数可以在输出结果中显示行号,方便定位具体记录。

“`

grep -n “404” /var/log/nginx/access.log

“`

– 使用-c参数可以统计匹配到的行数,用于查询某个字符串或者关键字在文件中出现的次数。

“`

grep -c “GET /index.html” /var/log/nginx/access.log

“`

– 通过管道符结合grep和sort命令,我们可以完成按访问次数排序的查询:

“`

grep “GET /index.html” /var/log/nginx/access.log | awk ‘{print $1}’ | sort | uniq -c | sort -rn

“`

上面这条命令的意思是:从access.log中查找所有访问/index.html 的记录,提取出IP地址,按照出现次数从 高到低排序输出。

2. 使用awk命令

awk是一种强大的文本处理工具,可以用于分离日志记录、提取信息、查找特定数据等操作。使用awk命令查询日志,可以方便的进行数据的挖掘和分析。比如我们想查看访问日志中访问量最多的前10个页面,可以输入以下命令:

“`

awk ‘{print $7}’ /var/log/nginx/access.log | sort | uniq -c | sort -rn | head -n 10

“`

这条命令会先提取出access.log文件中所有的请求页面,再通过sort和uniq命令去重统计访问次数,最后使用sort命令按照访问次数从高到低排序,并取出前10个结果输出。

3. 使用sed命令

sed是一种流式的文本编辑器,可以根据指定的规则对文本进行修改、删除或者替换等操作,也可以用于查询日志。比如我们要查询错误日志中所有的PHP错误记录,可以使用以下命令:

“`

sed -n ‘/\[error\]/,/^\$/p’ /var/log/nginx/error.log | grep “PHP”

“`

这个命令的意思是:查找error.log中所有包含”[error]”字段的记录,并输出到文本流中。然后通过grep命令查找其中包含“PHP”的内容,最终输出结果。

以上三种方法只是一些常用的查询方法,实际上在Linux系统中,有很多工具和组件都可以用于查询日志,如less命令、tl命令、cut命令、find命令等等。具体应该根据实际应用情况和个人喜好来选择,多掌握一些工具和技巧,能够让我们更加高效地完成工作。

三、查询实战

为了更加深入理解Linux查询日志的方法和技巧,下面我们以一个实际的案例来进行演示。

假设我们是某一个虚拟主机的管理员,需要查询服务器日志以了解网站的运行情况。我们先通过SSH登录到服务器,进入日志目录:

“`

cd /var/log/nginx

“`

然后我们可以使用tl命令查看最近10条访问日志:

“`

tl -10 access.log

“`

我们发现有一些IP地址不断访问同一个URL,看起来有点可疑。于是我们可以使用awk命令来查询这些IP地址的访问次数:

“`

awk ‘{print $1}’ access.log | sort | uniq -c | sort -rn | head

“`

查询结果显示了最常出现的IP地址和访问次数。其中,“55.55.55.55”这个IP地址的访问次数最多,可能需要进一步的深入分析。

接下来,我们来查询错误日志中的PHP错误记录。在广义上,这可能看起来像是一个比较漫长的过程。我们先使用sed命令查找所有PHP错误的记录,并输出到一个文件中:

“`

sed -n ‘/\[error\]/,/^\$/p’ error.log > php-error.txt

“`

这条命令的的意思是,查找nginx/error.log中所有包含“[error]”字段的记录,并将其输出到一个名叫php-error.txt的文件中。

然后我们可以在文件中使用grep命令查找所有的PHP错误记录:

“`

grep “PHP” php-error.txt

“`

查询结果显示了nginx/error.log文件中所有的PHP错误记录,帮助我们了解网站的运行情况以及可能存在的问题。

四、

通过以上的介绍和演示,我们可以发现使用Linux查询服务器日志并不是一件难事,只要掌握了一些基本的命令和技巧,在实际操作中就能够更加高效地完成查询工作。不过值得注意的是,在使用Linux查询日志时需要小心谨慎,避免误操作或者泄露敏感信息。我们应该尽量将查询命令和操作权限限制在必要范围内,并采用适当的安全措施来保护系统和数据的安全。

相关问题拓展阅读:

如何实时查看linux下的日志

Linux系统中有需要用于查禅孙看文本内容的命令,但其中每个命令又都有自己的特色特点,比如这个cat命令就是用于查看比较精简的文本内容的。这个其实是更好记的命令之一,cat在英语中是猫的意思.

cat /var/log/*.log

如果日志在更新,如何实时查看 tail -f /var/log/messages

还可以使用 watch -d -n 1 cat /var/log/messages

-d表示高亮不同的地方,-n表示多少秒刷新一次。

该指令,不会直接返回命令行,而是实时打印日志文件中新增加的内容,这一特性,对于查看日志是非常有效的。如果想终止输出,按 Ctrl+C 即可。

在Linux系统中,有三个主要的日志子系统:

连接时间日志–由多个程序执行,把纪录写入到/var/log/wtmp和/var/run/utmp,login等程序更新wtmp和utmp文件,使系统管理员能够跟踪谁在何时登录到系统。

进程统计–由系统贺雀链内核执行。当一个进程终止时,为每个进程往进程统计文件(pacct或acct)中写一个纪录。进程统计的目的是为系统中的基本服务提供命令使用统计。

错误日志–由syslogd(8)执行。各种系统守护进程、用户程序和内核通过syslog(3)向文件/var/log/messages报告值得注意的事件。另外有许多UNIX程序创建日志。像HTTP和FTP这样提供网络服务的服务器也保持详细的日志。

常用的日志文件如下:

access-log纪录HTTP/web的传输

acct/pacct纪录用户命令

aculog纪录MODEM的活动

btmp纪录失败的纪录

lastlog  纪录最近几次成功登录的事件和最后一次不成功的登录

messages    从syslog中记录信息(有的链接到syslog文件)系统启动后的信息和错误日志,是Red Hat Linux中最常用的日志之一

sudolog纪录使用sudo发出的命令

sulog纪录使用su命令的使用

syslog     从syslog中记录信息(通常链接到messages文件)

utmp纪录当前登录的每个用户

wtmp一个用户每次登录进入和退出时间的永久纪录

xferlog纪录FTP会话

/var/log/secure linuxprobe/com/chapter-02/html与安全相关的日志信息

/var/log/maillog 与邮件相关的日志信息

/var/log/cron 与定时任务相关的日志信息

/var/log/spooler 与UUCP和news设备相关的日志信息

/var/log/boot.log 守护进程启动和停止相关的日志消息

utmp、wtmp和lastlog日志文件是多数重用UNIX日志子系统的关键–保持用户登录进入和退出的纪录。有关当前登录用户的信息记 录在文件utmp中;登录进入和退出纪录在文件wtmp中;最后一次登录文件可以用lastlog命令察看。数据交换、关机和重起也记录在wtmp文件 中。所有的纪录都包含时间戳。这些文件(lastlog通常不大)在具有大量用户的系统中增长十分迅速。例如wtmp文件可以无限增长,除非定期截取。许 多系统以一天或者一周为单位岁郑把wtmp配置成循环使用。它通常由cron运行的脚本来修改。这些脚本重新命名并循环使用wtmp文件。通常,wtmp在第 一天结束后命名为wtmp.1;第二天后wtmp.1变为wtmp.2等等,直到wtmp.7。

每次有一个用户登录时,login程序在文件lastlog中察看用户的UID。如果找到了,则把用户上次登录、退出时间和主机名写到标准输出中,然 后login程序在lastlog中纪录新的登录时间。在新的lastlog纪录写入后,utmp文件打开并插入用户的utmp纪录。该纪录一直用到用户 登录退出时删除。utmp文件被各种命令文件使用,包括who、w、users和finger。

下一步,login程序打开文件wtmp附加用户的utmp纪录。当用户登录退出时,具有更新时间戳的同一utmp纪录附加到文件中。wtmp文件被程序last和ac使用。

具体命令

wtmp和utmp文件都是二进制文件,他们不能被诸如tail命令剪贴或合并(使用cat命令)。用户需要使用who、w、users、last和ac来使用这两个文件包含的信息。

who:who命令查询utmp文件并报告当前登录的每个用户。Who的缺省输出包括用户名、终端类型、登录日期及远程主机。例如:who(回车)显示

chyang     pts/0 Aug:06

ynguo     pts/2 Aug:32

ynguo     pts/3 Aug:55

lewis     pts/4 Aug:35

ynguo     pts/7 Aug:12

ylou     pts/8 Aug:15

如果指明了wtmp文件名,则who命令查询所有以前的纪录。命令who /var/log/wtmp将报告自从wtmp文件创建或删改以来的每一次登录。

w:w命令查询utmp文件并显示当前系统中每个用户和它所运行的进程信息。例如:w(回车)显示:3:36pm up 1 day, 22:34, 6 users, load average: 0.23, 0.29, 0.27。

USER   TTY    FROM     LOGIN@ IDLE JCPU PCPU  WHAT

chyang pts/0 202.38.68.242  3:06pm 2:04 0.08s 0.04s -bash

ynguo pts/2 202.38.79.47   3:32pm 0.00s 0.14s 0.05   w

lewis pts/3 202.38.64.233  1:55pm 30:39 0.27s 0.22s -bash

lewis pts/4 202.38.64.233  1:35pm 6.00s 4.03s 0.01s sh /home/users/

ynguo pts/7 simba.nic.ustc.e 2:12pm 0.00s 0.47s 0.24s telnet mail

ylou  pts/8 202.38.64.235  2:15pm 1:09m 0.10s 0.04s  -bash

users:users用单独的一行打印出当前登录的用户,每个显示的用户名对应一个登录会话。如果一个用户有不止一个登录会话,那他的用户名将显示相同的次数。例如:users(回车)显示:chyang lewis lewis ylou ynguo ynguo

last:last命令往回搜索wtmp来显示自从文件之一次创建以来登录过的用户。例如:

chyang pts/9  202.38.68.242 Tue Aug 1 08::23 (02:49)

cfan  pts/6  202.38.64.224 Tue Aug 1 08::48 (00:14)

chyang pts/4  202.38.68.242 Tue Aug 1 08::13 (03:40)

lewis pts/3  202.38.64.233 Tue Aug 1 08::09 (03:03)

lewis pts/2  202.38.64.233 Tue Aug 1 07::09 (03:12)

如果指明了用户,那么last只报告该用户的近期活动,例如:last ynguo(回车)显示:

ynguo  pts/4 simba.nic.ustc.e Fri Aug 4 16::20 (15:30)

ynguo  pts/4 simba.nic.ustc.e Thu Aug 3 23::40 (04:44)

ynguo  pts/11 simba.nic.ustc.e Thu Aug 3 20::02 (01:16)

ynguo  pts/0 simba.nic.ustc.e Thu Aug 3 03::42 (02:25)

ynguo  pts/0 simba.nic.ustc.e Wed Aug 2 01::16 1+02:12)

ynguo  pts/0 simba.nic.ustc.e Wed Aug 2 00::54 (00:11)

ynguo  pts/9 simba.nic.ustc.e Thu Aug 1 20::26 (00:55)

ac:ac命令根据当前的/var/log/wtmp文件中的登录进入和退出来报告用户连结的时间(小时),如果不使用标志,则报告总的时间。例如:ac(回车)显示:total 5177.47

ac -d(回车)显示每天的总的连结时间

Aug 12 total 261.87

Aug 13 total 351.39

Aug 14 total 396.09

Aug 15 total 462.63

Aug 16 total 270.45

Aug 17 total 104.29

Today total 179.00

ac -p (回车)显示每个用户的总的连接时间

ynguo 193.23

yucao 3.35

rong 133.40

hdai 10.52

zjzhu 52.87

zqzhou 13.14

liangliu 24.34

total 5178.22

lastlog:lastlog文件在每次有用户登录时被查询。可以使用lastlog命令来检查某特定用户上次登录的时间,并格式化输出上次登录日 志/var/log/lastlog的内容。它根据UID排序显示登录名、端口号(tty)和上次登录时间。如果一个用户从未登录过,lastlog显 示”**Never logged**。注意需要以root运行该命令,例如:

rong.38.64.Fri Aug 18 15:57:01 +

dbb**Never logged in**

xinchen**Never logged in**

pb **Never logged in**

xchen.38.64.Sun Aug 13 10:01:22 +

另外,可一加一些参数,例如,lastlog -u 102将报告UID为102的用户;lastlog -t 7表示限制上一周的报告。

关于linux查询服务器日志的介绍到此就结束了,不知道你从中找到你需要的信息了吗 ?如果你还想了解更多这方面的信息,记得收藏关注本站。


数据运维技术 » 轻松搞定!使用Linux查询服务器日志指南 (linux查询服务器日志)