「掌握技巧」Linux查询服务器日志分析，轻松解决问题 (linux查询服务器日志分析)
掌握技巧：Linux查询服务器日志分析，轻松解决问题
随着技术的不断发展，服务器组成了我们日常工作和生活中不可或缺的一部分。在大规模的服务器运维工作中，日志分析是至关重要的，它能够帮助我们更好地了解服务器的运作情况，排除问题和提高效率。而对于Linux服务器，通过合适的工具和技巧，我们可以轻松查询和分析日志，快速定位和解决问题。本文将围绕如何在Linux下查询服务器日志以及如何使用常见的日志分析工具展开讲解。
一、Linux查询日志的常见方法
1. 使用命令行查询
命令行是Linux下常用的查询日志的方法，也是最基础的方法之一。以下是常见的相关命令：
tl -f：用于实时监听日志文件的变化，能够在不断输出最新日志记录。
tl -n number：用于只输出某个日志文件的最近 number 行记录。
grep keyword filename：检索某个文件中包含特定关键词的所有行。
cat filename：用于输出特定文件的所有内容。
2. 使用日志管理工具
为了方便日志管理，开发者通常会使用一些专门的日志管理工具。例如，Logrotate能够自动轮替日志文件，防止日志过于庞大，同时也能备份旧的日志文件，备份的时间及路径都可以通过配置自行设置。Logwatch则提供了自动分析原始日志信息的功能，并将分析结果以定期报告的形式呈现给用户。
二、常见日志分析工具
1. AWK
AWK是一种功能强大的文本分析工具，它的语法类似于C语言。可以使用它来进行高效日志分析。以下是结合实例的使用方法：
awk ‘/keyword/ {print}’ filename：用于检索包含某个关键词的所有行。
awk ‘{print “$1”}’ filename：用于分割以空格分隔的日志，并输出之一个字段，也就是时间戳。
2. grep
grep是Linux下的一种文本匹配工具，能够快速搜索文件内容并显示匹配行。也可以通过 -P 参数和正则表达式来匹配指定模式。以下是其使用方法：
grep keyword filename：用于检索包含某个关键词的所有行。
grep -v keyword filename：用于检索排除包含某个关键词的行。
grep -c keyword filename：用于检索某个关键词的出现次数。
3. Sed
Sed是一种流编辑器，能够对文本进行多种操作。在日志分析中，Sed通常被用来进行替换和删除操作，例如：
sed ‘s/old/new/g’ filename：将某个关键词替换成新的内容。
sed ‘/keyword/d’ filename：将包含某个关键词的行删掉。
sed ‘/^$/d’ filename：将空白行删除掉。
4. Logstash
Logstash是一种开源的日志数据收集引擎，它能够收集来自各种不同源的数据，包括日志、事件和度量衡数据，并将其存储在一个中央位置。Logstash还支持多种输出方式，例如可视化工具Kibana、日志文件、Elasticsearch等。以下是部分配置实例：
input { file {path => “/var/log/nginx/access.log”}}：用于输入一个日志文件。
filter { grok { match => { “message” => “%{COMBINEDAPACHELOG}” } } }：用于解析复杂的日志格式，如Apache格式。
output { elasticsearch { hosts => [“localhost:9200”] } }：用于输出到Elasticsearch，实现搜索和分析。
以上是常用的一些日志分析工具和应用场景。需要注意的是，不同的服务器和不同的项目会有其独特的日志生成方式和格式，因此需要根据具体的情况选择不同的工具和方法。
三、结语
本文介绍了Linux下的日志查询和分析技巧。通过命令行和日志管理工具，我们可以轻松地查询和管理日志文件。对于高效数据处理，AWK、grep和Sed是常见的文本分析工具，而对于大规模数据分析，使用分布式日志收集工具Logstash能够更好地进行数据整合和分析。因此，在实际使用中，需要结合具有代表性的实际场景，选择合适的工具和技巧，提高日志分析效率和精准度，从而快速解决服务器相关问题。
相关问题拓展阅读：
Linux中的查看服务器运行的日志的命令是什么呢
cat 或者 tail -fLinux日志文件说明
/var/log/message 系统启动后的信数伍息和错误日志，是Red Hat Linux中最常用的日志之一茄或
/var/log/secure与安全相关的日志信息
/var/log/maillog与邮件相关的日志信息
/var/log/cron与定时任务相关的日志信息
/var/log/spooler 与UUCP和news设备相关的日志信息
/var/log/boot.log 守护进程启动和停止相关的日志消息薯纳或
在 Linux 系统中，各种日志文件（*.log）都存放于 /var/log 子目录下面，你可以在超级用户的状态 # 下，进入 /var/log 子蔽首团目录，然后可以使用 more 命令查看你宏橘需要进行查看的日志。
例如：
#cd /var/log
#more last.log （查看最后登录 Linux 系统的用户名都有芹乎谁）
cat 或者 tail -fLinux日志文件说明
/var/log/message 系统启动后的信数伍息和错误日志，是Red Hat Linux中最常用的日志之一茄或
/var/log/secure与安全相关的日志信息
/var/log/maillog与邮件相关的日志信息
/var/log/cron与定时任务相关的日志信息
/var/log/spooler 与UUCP和news设备相关的日志信息
/var/log/boot.log 守护进程启动和停止相关的日志消息薯纳或
如何查看linux系统的进程监控日志
cat /var/log/*.log
如果日志在更新，如何实时查看 tail -f /var/log/messages
还可以使用 watch -d -n 1 cat /var/log/messages
-d表示
高亮
不同的地方，-n表示多少秒刷新一次。
该指令，不会直接返回
命令行
，而是实时打印日志文件中新增加的内容，这一特性，对于查看日志是非常有效的。如果想终止输出，按 Ctrl+C 即可。
在Linux系统中，有三个主要的日志子系统：
连接时间日志–由多个程序执行，把纪录写入到/var/log/wtmp和/var/run/utmp，login等程序更新wtmp和utmp文件，使系统管理员能够跟踪谁在何时登录到系统。
进程统计–由系统内核执行。当一个进程终止时，为每个进程往进程统计文件（pacct或acct）中写一个纪录。进程统计的目的是为系统中的基本服务提供命令使用统计。
错误日志–由syslogd（8）执行。各种系统
守护进程
、用户程序和内核通过syslog（3）向文件/var/log/messages报告值得注意的事件。另外有许多UNIX程序创建日志。像HTTP和FTP这样提供网络服务的服务器也保持详细的日志。
常用的日志文件如下：
access-log纪录HTTP/web的传输
acct/pacct纪录用户命令
aculog纪录MODEM的活动
btmp埋此 纪录失败的纪录
lastlog 纪录最近几次成功登录的事件和最后一次不成功的登录
messages 从syslog中记录信息（有的链接到syslog文件）系统启动后的信息和错误日志，是Red Hat Linux中最常用的日志之一
sudolog纪录使用sudo发出的命令
sulog纪录使用su命令的使用
syslog 从syslog中记录信息（通常链接到messages文件）
utmp纪录当前登录的每个用户
wtmp弯游迅 一个用户每次登录进入和退出时间的永久纪录
xferlog纪录FTP会话
/var/log/secure与安全相关的日志信息
/var/log/maillog 与邮件相关的日志信息
/var/log/cron 与定时任务相关的日志信息
/var/log/spooler 与UUCP和news设备相关的日志信息
/var/log/boot.log 守护进程启动和停止相关的日志消息
utmp、wtmp和lastlog日志文件是多数重用UNIX日志子系统的关键–保持用户登录进入和退出的磨厅纪录。有关当前登录用户的信息记录在文件utmp中；登录进入和退出纪录在文件wtmp中；最后一次登录文件可以用lastlog命令察看。数据交换、关机和重起也记录在wtmp文件中。所有的纪录都包含时间戳。这些文件（lastlog通常不大）在具有大量用户的系统中增长十分迅速。例如wtmp文件可以无限增长，除非定期截取。许多系统以一天或者一周为单位把wtmp配置成循环使用。它通常由cron运行的脚本来修改。这些脚本重新命名并循环使用wtmp文件。通常，wtmp在之一天结束后命名为wtmp.1；第二天后wtmp.1变为wtmp.2等等，直到wtmp.7。
每次有一个用户登录时，login程序在文件lastlog中察看用户的UID。如果找到了，则把用户上次登录、退出时间和主机名写到标准输出中，然后login程序在lastlog中纪录新的登录时间。在新的lastlog纪录写入后，utmp文件打开并插入用户的utmp纪录。该纪录一直用到用户登录退出时删除。utmp文件被各种命令文件使用，包括who、w、users和finger。
下一步，login程序打开文件wtmp附加用户的utmp纪录。当用户登录退出时，具有更新时间戳的同一utmp纪录附加到文件中。wtmp文件被程序last和ac使用。
具体命令
wtmp和utmp文件都是二进制文件，他们不能被诸如tail命令剪贴或合并（使用cat命令）。用户需要使用who、w、users、last和ac来使用这两个文件包含的信息。
who：who命令查询utmp文件并报告当前登录的每个用户。Who的缺省输出包括
用户名
、终端类型、登录日期及远程主机。例如：who（回车）显示
chyang pts/0 Aug:06
ynguo pts/2 Aug:32
ynguo pts/3 Aug:55
lewis pts/4 Aug:35
ynguo pts/7 Aug:12
ylou pts/8 Aug:15
如果指明了wtmp文件名，则who命令查询所有以前的纪录。命令who /var/log/wtmp将报告自从wtmp文件创建或删改以来的每一次登录。
w：w命令查询utmp文件并显示当前系统中每个用户和它所运行的进程信息。例如：w（回车）显示：3:36pm up 1 day, 22:34, 6 users, load average: 0.23, 0.29, 0.27。
USER TTY FROM LOGIN@ IDLE JCPU PCPU WHAT
chyang pts/0 202.38.68.242 3:06pm 2:04 0.08s 0.04s -bash
ynguo pts/2 202.38.79.47 3:32pm 0.00s 0.14s 0.05 w
lewis pts/3 202.38.64.233 1:55pm 30:39 0.27s 0.22s -bash
lewis pts/4 202.38.64.233 1:35pm 6.00s 4.03s 0.01s sh /home/users/
ynguo pts/7 simba.nic.ustc.e 2:12pm 0.00s 0.47s 0.24s telnet mail
ylou pts/8 202.38.64.235 2:15pm 1:09m 0.10s 0.04s -bash
users：users用单独的一行打印出当前登录的用户，每个显示的用户名对应一个登录会话。如果一个用户有不止一个登录会话，那他的用户名将显示相同的次数。例如：users（回车）显示：chyang lewis lewis ylou ynguo ynguo
last：last命令往回搜索wtmp来显示自从文件之一次创建以来登录过的用户。例如：
chyang pts/9 202.38.68.242 Tue Aug 1 08::23 (02:49)
cfan pts/6 202.38.64.224 Tue Aug 1 08::48 (00:14)
chyang pts/4 202.38.68.242 Tue Aug 1 08::13 (03:40)
lewis pts/3 202.38.64.233 Tue Aug 1 08::09 (03:03)
lewis pts/2 202.38.64.233 Tue Aug 1 07::09 (03:12)
如果指明了用户，那么last只报告该用户的近期活动，例如：last ynguo（回车）显示：
ynguo pts/4 simba.nic.ustc.e Fri Aug 4 16::20 (15:30)
ynguo pts/4 simba.nic.ustc.e Thu Aug 3 23::40 (04:44)
ynguo pts/11 simba.nic.ustc.e Thu Aug 3 20::02 (01:16)
ynguo pts/0 simba.nic.ustc.e Thu Aug 3 03::42 (02:25)
ynguo pts/0 simba.nic.ustc.e Wed Aug 2 01::16 1+02:12)
ynguo pts/0 simba.nic.ustc.e Wed Aug 2 00::54 (00:11)
ynguo pts/9 simba.nic.ustc.e Thu Aug 1 20::26 (00:55)
ac：ac命令根据当前的/var/log/wtmp文件中的登录进入和退出来报告用户连结的时间（小时），如果不使用标志，则报告总的时间。例如：ac（回车）显示：total 5177.47
ac -d（回车）显示每天的总的连结时间
Aug 12 total 261.87
Aug 13 total 351.39
Aug 14 total 396.09
Aug 15 total 462.63
Aug 16 total 270.45
Aug 17 total 104.29
Today total 179.00
ac -p （回车）显示每个用户的总的连接时间
ynguo 193.23
yucao 3.35
rong 133.40
hdai 10.52
zjzhu 52.87
zqzhou 13.14
liangliu 24.34
total 5178.22
lastlog：lastlog文件在每次有用户登录时被查询。可以使用lastlog命令来检查某特定用户上次登录的时间，并格式化输出上次登录日志/var/log/lastlog的内容。它根据UID排序显示登录名、
端口号
（tty）和上次登录时间。如果一个用户从未登录过，lastlog显示”**Never logged**。注意需要以root运行该命令，例如：
rong.38.64.Fri Aug 18 15:57:01 +
dbb**Never logged in**
xinchen**Never logged in**
pb **Never logged in**
xchen.38.64.Sun Aug 13 10:01:22 +
另外，可一加一些参数，例如，lastlog -u 102将报告UID为102的用户；lastlog -t 7表示限制上一周的报告。
关于linux查询服务器日志分析的介绍到此就结束了，不知道你从中找到你需要的信息了吗 ？如果你还想了解更多这方面的信息，记得收藏关注本站。
