将日志中的指定字段对齐显示输出
在分析ats的访问日志时，我经常会遇到将一些特殊字段对齐显示的需求，网上调研了一下，发现使用column -t就可以轻松搞定，比如
找到ATS的access.log中的200响应时间过长的日志
cat access.log | grep ' 200 ' | awk -F '"' '{print $3}' > taoyx.log
column -t taoyx.log
将指定文件中的各列对齐显示，效果很赞
将200状态码中响应时间超过5s的响应挑出来，并按照列排列
cat access.log | grep ' 200 ' | awk -F '"' '{print $3}' | awk '$2>5000{print $0}' | column -t
统计几分钟前的这种延时访问记录
tail -1000 access.log | grep ' 200 ' | awk -F '"' '{print $3}' | awk '$2>5000{print $0}' | column -t
对找到的日志，将其找出来，重新请求下
tail -1000 access.log | grep '19979'
效果图如下
更多相关：
-
#coding:utf-8'''Created on 2017年10月25日@author: li.liu'''import pymysqldb=pymysql.connect('localhost','root','root','test',charset='utf8')m=db.cursor()'''try:#a=raw_inpu...
-
python数据类型：int、string、float、boolean 可变变量：list 不可变变量：string、元组tuple 1.list list就是列表、array、数组 列表根据下标（0123）取值，下标也叫索引、角标、编号 new_stus =['刘德华','刘嘉玲','孙俪','范冰冰'] 最前面一个元素下标是0，最...
-
from pathlib import Path srcPath = Path(‘../src/‘) [x for x in srcPath.iterdir() if srcPath.is_dir()] 列出指定目录及子目录下的所有文件 from pathlib import Path srcPath = Path(‘../tenso...
-
我在使用OpenResty编写lua代码时，需要使用到lua的正则表达式，其中pattern是这样的， --热水器设置时间 local s = '12:33' local pattern = "(20|21|22|23|[01][0-9]):([0-5][0-9])" local matched = string.match(s, "...
-
在运维过程中，发现portal中出现流量异常曲线， 就从排查ATS的访问日志中的异常域名开始，下面是我截获的对应时段的访问日志截图 发现里面有502,403等异常响应，我们将这段访问日志文件记为exception_peak.log。采用下面的命令来过滤出502的访问记录，并剥离出对应的访问链接的host，统计指定时段中...
-
文章目录awk和sed的区别awk脚本的流程控制awk 记录和字段字段的引用awk表达式赋值操作符算数操作符系统变量（awk本身自定义的系统变量）关系操作符布尔操作符awk 条件和循环条件语句循环awk 的数组数组的定义数组的遍历删除数组举例，编写awk脚本文件`avg.awk`命令行参数数组复杂数组的使用案例awk函数算数函数字符...
-
变量传递 外部变量传入 lsblk|awk -v A=$A -v B=$B '{print A,B}'lsblk | awk '{print A,B}' A=$A B=$B 内部变量传出 eval $(lsblk|awk '{print "A='$1'"}')eval $(lsblk|awk 'printf("A=%s ",$1)...
-
awk的语法 awk [options] ‘Pattern {Actions}’ file1,file2… 之前介绍了三种模式：空模式，关系运算模式，BEGIN/END模式 正则模式 模式可以理解成条件，正则模式就是满足正则表达式条件的，就执行相应的动作，否则不执行。 如果我们想要找到在/etc/passwd文件中，...
-
awk有一些内置变量和外置变量，内置变量就是awk自带的变量，用户可以拿来直接使用，如FS，OFS等 awk常用内置变量如下几种： FS：输入单词分隔符，默认是空格 OFS：输出单词分隔符，默认是空格 RS：指定输入时候的换行符(awk是一行行处理数据的) ORS：指定输出的符号，替代换行符(awk以换行符...