如何使用Linux查询某个时间段的记录 (linux 查询某个时间段)

在Linux操作系统中,查询某个时间段的记录是一项很常见的任务。无论是系统管理员还是普通用户,都可能需要查询系统日志或者其他记录中的某个时间段的信息。本文将介绍如何使用Linux中的一些命令和工具来查询某个时间段的记录。

1. 使用grep命令

grep命令是Linux中最常见的文本搜索工具之一,它可以在文件中查找某个字符串或者正则表达式,并将匹配的行输出到终端。如果要查询某个时间段的记录,可以先用grep命令将记录文件中的所有行输出到终端,然后使用管道符号(|)和awk命令来过滤出指定时间段的记录。下面是一个示例:

“`

grep ‘login’ /var/log/auth.log | awk ‘$3>”Apr” && $3″10:00:00″ && $4

“`

这个命令会在/var/log/auth.log文件中查找所有包含’login’字符串的行,并使用awk命令过滤出时间在4月份且在上午10点到中午12点之间的记录。

2. 使用sed命令

sed命令是另一个文本处理工具,它可以对文本进行替换、删除、插入等操作。如果要查询某个时间段的记录,可以先使用sed命令将所有记录按照时间排序,然后使用grep命令和管道符号来过滤出指定时间段的记录。下面是一个示例:

“`

sed -e ‘s/^/JAN /;t’ -e ‘s/^/FEB /;t’ -e ‘s/^/MAR /;t’ -e ‘s/^/APR /;t’ -e ‘s/^/MAY /;t’ -e ‘s/^/JUN /;t’ -e ‘s/^/JUL /;t’ -e ‘s/^/AUG /;t’ -e ‘s/^/SEP /;t’ -e ‘s/^/OCT /;t’ -e ‘s/^/NOV /;t’ -e ‘s/^/DEC /’ /var/log/auth.log | grep ‘login’ | awk ‘$2==”APR” && $3>10 && $3

“`

这个命令会将/var/log/auth.log文件中的所有记录按照时间排序,并在每一行前加上月份。然后使用grep命令过滤出所有包含’login’字符串的行,并使用awk命令过滤出时间在4月份且在上午10点到中午12点之间的记录。

3. 使用logrotate命令

logrotate命令是Linux中的一个日志管理工具,它可以定期轮换日志文件,并压缩旧日志文件。如果要查询某个时间段的记录,可以先使用logrotate命令将日志文件按照时间轮换,然后使用grep命令和awk命令来查询指定时间段的记录。下面是一个示例:

“`

logrotate -d /etc/logrotate.d/auth

zcat /var/log/auth.log.1.gz | grep ‘login’ | awk ‘$3>10 && $3″00:00:00″ && $4

“`

这个命令会使用logrotate命令对/etc/logrotate.d/auth文件进行一次模拟轮换,以便得到轮换后的日志文件名称。然后使用zcat命令解压缩旧日志文件,并使用grep命令和awk命令过滤出时间在指定时间段内的记录。

相关问题拓展阅读:

linux系统维护,关于grep一个时间段的问题

grep ’14:25:4 \| 14:25:5′ x.log

这样求出来的是

14:25:48

14:25:49

14:25:50

14:25:51

14:25:52

….

14:25:59

本质还是一个一个去匹配.

你能用这个求出 14:25:10 到14:25:59 的所有内容吗?

所以上面这个只是碰巧让你能撞上了.

要想求出你想要的结果可以用如下:

sar命令查看历史数据

前言

有的时候,我们要通过对系统的cpu负载等性能数值的查看,来判排查系统产生某种故障(经常死机或者运行速度突然变慢)的原因。但是,简单的top,uptime,w等命令只可以查看当前的负载,而无法查看过去的某一时间段的cpu的负载情况。

下面就介绍一个用于性能分析的命令,其可以用于查看过去的某一时间段的cpu的负载情况(系统性能)。

查看某一时间段的cpu使用情况,请直接跳到第七节。

一、sar概念

sysstat是Linux 系统中的常用工具包,而sar 是 Linux中sysstat工具包中的用于监控Linux系统性能的工具之一。

sysstat 工具包中包含两种类型的工具:即时查看工具(iostat、mpstat、sar);累计统计工具(sar)

因此sar命令,又叫做系统活动情况报告。不仅可以实时查看服务器的性能,还可以做累计统计。

二、sar可监控的范围

文件的读写情况

系统调用的使用情况

磁盘I/O使用情况

CPU的使用统计

内存使用状况

进程活动

IPC有关的活动

三、sar命令使用环境

sar命令使用格式:

sar+

命令行

选项(可选) + 间隔时间(可选) + 次数(可选)

常用来判断一个系统瓶颈问题

查询CPU可用 sar -u 和 sar -q 等来查看查询内存可用 sar -B、sar -r 和 sar -W 等来查看查询io可用 sar -b、sar -u 和 sar -d 等来查看

四、sar命令累计统计的实现过程

系统会通过调用 /usr/lib64/sa/ 中的三个工具(sa1 sa2 sadc)来实现,周期地记录当时的系统性能的信息的功能。

sa1 :收集并将每天的系统性能的信息写入一个二进制的文件中,它是sadc的前端程序

sa2 :收集每天的系统活跃的信息并写入总结性的文件中,其作为 sar的前端程序

sadc :收集系统的动态数据的数据并写入一个二进制的文件中,其作为 sar 工具的后端

五、sar的日志

sar是由有类似日志切割的功能的,它会依据/etc/cron.d/sysstat中的计划任务,将日志放入/var/log/sa/中

注:日志为二进制文件,不可使用more、less、vim工具查看,必须使用sar或sadf

可以根据需求修改该计划任务

如要查看某一时间段的服务器的性能的其中一个方法就是:使用sar命令,查看当天的日志文件

sar -f /var/log/sa/sa15

#sar-f/var/log/sa/sa15Linux3.10.0-327.el7.x86_64(ops-node7)07/15/2023_x86_64_(24CPU)12:00:01AMCPU%user%nice%system%iowait%steal%idle12:10:01AMall1.350.000.850.120.0097.6712:20:01AMall1.320.000.860.110.0097.7112:30:02AMall1.370.000.870.110.0097.6512:40:01AMall1.320.000.910.110.0097.6612:50:01AMall1.350.000.890.110.0097.6501:00:01AMall1.360.000.870.110.0097.6601:10:01AMall1.360.000.850.110.0097.6801:20:01AMall1.350.000.890.100.0097.6601:30:01AMall1.320.000.890.110.0097.6801:40:01AMall1.290.000.950.110.0097.6501:50:01AMall1.350.000.880.120.0097.6402:00:01AMall1.340.000.880.110.0097.6802:10:01AMall1.330.000.900.110.0097.6502:20:01AMall1.360.000.870.120.0097.6502:30:01AMall1.350.000.850.120.0097.6802:40:01AMall1.410.000.920.120.0097.5602:50:01AMall1.570.000.950.130.0097.3503:00:01AMall4.210.000.810.160.0094.8103:10:01AMall2.500.000.870.130.0096.5003:20:01AMall1.370.000.870.120.0097.6503:30:01AMall1.360.000.950.130.0097.5603:40:01AMall1.480.000.970.240.0097.3003:50:01AMall1.350.010.910.130.0097.6004:00:01AMall1.390.000.950.190.0097.4704:10:01AMall1.360.000.990.130.0097.52

注意:

sar查看性能或其日志时,使用的12/24小时制;日志的切割是昨天晚上12点到今天12点为一天;默认只保留一个月的日志

六、sar命令参数及输出项详解

【1】格式

用法:sar + 选项 + 时间间隔(可选) + 次数 (可选)

interval: 取样周期,单位是秒count:取样次数,默认值为1options:命令行选项

【2】常用选项

-A所有报告的总和-B输出内存页面的统计信息-b输出I/O和传送速率的统计信息-C输出进程统计信息及每秒创建的进程数-d输出每一个块设备的活动信息-H输出交换空间利用率信息-h输出帮助信息-p输出友好设备名字,以方便查看,常与-d和-n参数结合使用-q输出进程队列长度和系统平均负载状态统计信息-R输出内存页面的统计信息-r输出内存和交换空间的统计信息-S输出交换空间利用率信息-t读取 /var/log/sa/下的某日志的数据时显示其中记录的原始时间-u输出整体CPU使用情况的统计信息-V输出版本信息-v输出内核表状况统计信息(inode、文件和其他内核表的统计信息)-W输出系统交换的统计信息-w输出任务创建与系统转换统计信息-y输出终端设备的活动信息I输出指定中断的统计信息,后方可加参数{…|SUM|ALL|XALL}  …指定中断号SUM指定输出每秒接收到的中断总数ALL指定输出前16个中断XALL指定输出全部的中断信息P输出指定的部分的CPU的统计信息,后方可加参数{cpu|ALL}cpu指定cpuALL输出单个和整体cpu的统计数据n输出

网络设备

(网卡)状态统计信息,后方可加参数{DEV|EDEV|NFS|NFSD|SOCK|ALL}    DEV输出网络设备的统计信息EDEV输出网络设备的错误统计信息NFS输出NFS客户端的活动统计信息NFSD输出NFS服务器的活动统计信息SOCK输出网络套接字的使用统计信息ALL输出所有类型的网络活动统计信息f从文件中读取数据信息。一般读取sar日志,也可读取-o选项生成的文件,后方要加文件名-o将sar的输出信息保存到文件中,后方要加文件名-i指定间隔时长,单位为秒-s指定输出统计数据的起始时间(格式为hh:mm:ss;例如01:00:00)  -e指定输出统计数据的截至时间,通常与-S选项连用。无数值时默认为18:00:00(格式为hh:mm:ss;例如09:00:00)

【3】输出项

cpu的输出

sar -u

%usr CPU在用户模式下,执行进程的时间百分比 %niceCPU在用户模式下,用于nice操作,所占用CPU总时间的百分比 %systemCPU处在系统模式(内核态)下,执行进程的时间百分比 %iowaitCPU用于等待I/O操作完成(等待输入输出完成),占用CPU总时间的百分比 %steal管理程序为另一个虚拟进程提供服务而等待虚拟CPU的百分比%idleCPU空闲时间百分比

注意:

如果%iowait的值过高,表示硬盘存在I/O瓶颈 如果%idle值高,表示CPU较空闲如果%idle 的值高但系统响应慢时,有可能是 CPU 等待分配内存,此时应加大内存容量 如果%idle 的值持续低于10,则系统的 CPU 处理能力相对较低,表明系统中最需要解决的资源是 CPU

I/O和传送速率输出

sar -b

tps  每秒向磁盘设备请求数据的次数,包括读、写请求,其为rtps与wtps的和。每一次IO下发后会先将多个请求合并为一个I/O磁盘请求,这里tps指请求合并后的请求计数rtps 每秒向磁盘设备的读请求次数 wtps 每秒向磁盘设备的写请求次数 bread/s每秒钟从物理设备读入的数据量,单位为 块/s bwrtn/s每秒钟向物理设备写入的数据量,单位为 块/s

设备使用情况输出

sar -d

DEV  磁盘设备,加上用参数-p可以打印出sda等磁盘设备名称;如不加参数-p,设备则显示为dev253-0等tps  每秒向磁盘设备请求数据的次数,包括读、写请求,其为rtps与wtps的和。每一次IO下发后会先将多个请求合并为一个I/O磁盘请求,这里tps指请求合并后的请求计数rd_sec/s每秒读扇区的次数wr_sec/s每秒写扇区的次数avgrq-sz平均每次设备I/O操作的数据大小(扇区)avgqu-sz磁盘请求队列的平均长度await从请求磁盘到系统处理完,每次请求的平均消耗时间,包括请求队列等待时间(单位是毫秒)svctm系统处理每次请求的平均时间,不包括在请求队列中消耗的时间%utilI/O请求占CPU的百分比

网络设备统计信息输出

sar -n EDEV

IFACE网络设备名rxpck/s每秒接收的包数量txpck/s每秒传输的包数量rxbyt/s每秒接收的字节数(单位为byte)txbyt/s每秒传输的字节数(单位为byte)rxkB/s每秒收的数据量(单位为kB)txkB/s每秒发的数据量(单位为kB)rxcmp/s每秒接收压缩包的数量txcmp/s每秒传输压缩包的数量rxmcst/s每秒接收的多播(multicast)包的总数排查网络设备故障

网络设备故障信息输出

EDEV |egrep ‘eth0|IFACE’ (本次指定了网卡etho0,可填入其他网卡)

IFACE网络设备名rxerr/s每秒接收的坏包数量txerr/s传输包时每秒发生错误的数量coll/s传输包时每秒发生冲突的数量rxdrop/s接收包时,每秒丢弃的包的数量(缺乏缓存导致)txdrop/s传输包时,每秒丢弃的包的数量(缺乏缓存导致)txcarr/s传输包时,每秒发生的传输错误的数量rxfram/s接收包时,每秒发生帧校验错误的数量rxfifo/s接收包时,每秒钟缓冲区溢出错误的数量txfifo/s传输包时,每秒钟缓冲区溢出错误的数量

内存分页状态输出

sar -B

pgpgin/s每秒从磁盘空间或交换空间置换到内存的字节数(单位为KB)pgpgout/s每秒从内存置换到磁盘空间或交换空间的字节数(单位为KB)fault/s每秒钟系统产生的缺页数(主缺页加次缺页)majflt/s每秒钟产生的主缺页数pgfree/s每秒被放入空闲队列中的页个数pgscank/s每秒被kswapd扫描的页个数pgscand/s每秒直接被扫描的页个数pgsteal/s每秒钟从cache中被清除来满足内存需要的页个数%vmeff每秒清除的页占总扫描页的百分比

进程队列长度和平均负载状态输出

sar -q

runq-sz运行队列的长度,等待运行的进程数量

plist-sz进程列表中进程和线程的数量

ldavg最后1分钟的系统平均负载

ldavg过去5分钟的系统平均负载

ldavg过去15分钟的系统平均负载

内存和交换空间状态输出

sar -r

kbmemfree空闲的内存数量(单位为KB)kbmemused已使用的内存数量,不包含内核使用的内存(单位为KB)%memused已使用内存的百分数kbbuffers内核缓冲区buffer,使用的内存数量(单位为KB)kbcached内核高速缓存cache数据使用的内存数量(单位为KB)kbcommit保证当前系统所需要的内存,即为了确保不溢出而需要的内存(RAM+swap)%commitkbcommit与所有内存总量的百分比

系统交换活动信息输出

sar -W

pswpin/s每秒系统换入的交换页面数量

pswpout/s每秒系统换出的交换页面数量

七、sar使用实例-查看某一时间段的情况

查看凌晨1点到3点的cpu

sar -s 01:00:00 -e 03:00:00

查看凌晨1点到3点的系统的平均负载

若要看某时间段其他性能,加上对应选项

sar -s 01:00:00 -e 03:00:00 -q

查看本月3号的cpu

注意:

该操作需要去查看sar的日志(第五节已经介绍一次)

默认只保存一个月的

sar查看性能或其日志时,注意自己的使用的是12还是24小时制

日志的切割是昨天晚上12点到今天12点为一天

关于linux 查询某个时间段的介绍到此就结束了,不知道你从中找到你需要的信息了吗 ?如果你还想了解更多这方面的信息,记得收藏关注本站。


数据运维技术 » 如何使用Linux查询某个时间段的记录 (linux 查询某个时间段)