linux 日志分析 命令grep、awk、sort、uniq

insularisland 2014-05-19

查看日志去除重复

cat catalina.out |grep "xxxxx"|awk -F ']' '{print $2}'|sort|uniq

统计去除重复的行数

cat catalina.out |grep "xxxxx"|awk -F ']' '{print $2}'|sort|uniq|wc -l 

查询日志大于某一个时间点的日志,并且去重复

cat catalina.out | grep "xxxxxxxx"|awk '($0>"05-19 18:20:00"){print $0}'|awk -F ']' '{print $2}'|sort|uniq

统计行数

cat catalina.out | grep "xxxxxxxx"|awk '($0>"05-19 18:20:00"){print $0}'|awk -F ']' '{print $2}'|sort|uniq|wc -l

insularisland

insularisland

相关推荐

mysql的sort by学习

学习了mysql的next-key-lock后，现在正式进入sort by的学习阶段。我也听说sort by有可能会对mysql造成压力，所以要学习一下sort by的过程，从而才能深刻的了解自己的sort by语句对mysql的压力，避免线上性能低下或者

ztyzly00 / 0评论 2020-07-18

如何在微信小程序中使用骨架屏的步骤

骨架屏主要起到占位作用，向用户说明该区域有内容，有一定的心理准备。使用哪一种方案，就要根据自己的项目情况来进行选择了。我采用的是第一种，因为这个页面加载的DOM节点太多了。

killgod / 0评论 2020-06-14

查看linux占用内存/CPU最多的进程

[ tmp]# cat test |sort -t : -k 1 以：为分隔符，排序第1列，从小到大。[ tmp]# cat test |sort -t : -k 2 –nr 以：为分隔符，排序第2列，从大到小，带-n，按数字比较

小惠 / 0评论 2020-06-05

12.分而治之-归并排序

关注「码哥字节」设置星标，接收最新技术干货提升自我。前面我们学习了时间复杂度 O 的经典排序算法：冒泡排序、插入排序、选择排序，今天我们来学习时间复杂度为 O 的归并排序，这种排序思想也更加常用。归并排序和快速排序都用到了 分治思想 。自上而下的递归；自下

Oudasheng / 0评论 2020-06-04

12.分而治之-归并排序

关注「码哥字节」设置星标，接收最新技术干货提升自我。前面我们学习了时间复杂度 O 的经典排序算法：冒泡排序、插入排序、选择排序，今天我们来学习时间复杂度为 O 的归并排序，这种排序思想也更加常用。归并排序和快速排序都用到了 分治思想 。自上而下的递归；自下

从零开始 / 0评论 2020-06-05

Redis入门(4) - 排序

很多场合需要对元素进行排序，这时除了使用有序集合外，还可以借助Redis提供的SORT命令来排序。如果元素为非数字，增加ALPHA参数可以按照字典顺序排列。如果没有加ALPHA参数的话，SORT命令会尝试将所有元素转换成双精度浮点数来比较，如果无法转换则会

litterfrog / 0评论 2020-05-30

Linux awk统计日志中出现过的IP(或出现次数最多的N个IP)

awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。awk ‘BEGIN{ commands }

老谢的自留地 / 0评论 2020-05-09

算法与数据结构系列 ( 三 ) - 选择排序法 - Select Sort

首先我们玩的是比较经典的选择排序选择排序也是我们本系列的第一个O(n^2)算法很多人认为最优的算法是O级别的算法。O(n^2)相对而言比较基础，由简入难。我们可能找不到最优的解决办法，但是我们肯定会一种最简单的办法。有些情况下，我们借用算法的思想去做项目的

wulaxiaohei / 0评论 2020-05-05

mysql 之order by

sql 里面的order by 在mysql 里面是如何实现的呢？explain select city,name,age from user where city=‘hz‘ order by name limit 1000；其中Using filesor

cyyking / 0评论 2020-05-03

JavaScript数组的sort方法常规用法

let nums = [1, 3, 4, -4, 2, 5, 1];

Luffyying / 0评论 2020-04-25

PHP排序函数sort底层实现分析

线性表的常规排序算法，包括冒泡、插入、选择、归并和快排，其中综合性能最好的就是快排，所以快排在工程实践中也有大量的应用，比如很多编程语言都提供了排序函数，而这些排序函数基本都是基于快速排序实现的，比如 PHP 的数组排序函数 sort 就是如此。今天我们将

aaLiweipeng / 0评论 2020-04-15

排序和数据结构

# 最坏的时间复杂度是：，最优的时间复杂度是：O 有序的列表在内层循环一趟就就return了。# 定一个标志位，做一个排序的优化。# 成False，进而走内层循环外面的if判断，终止整个函数的运行。

wordmhg / 0评论 2020-04-09

关于python中sort排序的一个简单问题：

就是对这个排序的有点不太理解,为什么是[0, 0, 1, 4, 2, 3]，不应该按升序来的吗？之所以产生这个误区，是因为对这个sort理解还不够，我之前也写过一篇关于sort排序的实现，里面简单的阐述原理，并且也实现了demo。我们再来回到这个问题上：a

wangqing / 0评论 2020-04-06

jpa前端分页参数传递和定制返回属性

@Query(nativeQuery = false,value = " select new Map(entityId,sendTime) from GpsInfo a where a.simNo=?

Pinkr / 0评论 2020-03-12

sort方法和自定义比较器的写法

对自定义对象排序时要自己重写比较器，对象数组则调用Arrays.sort()，对象集合则调用Collections.sort()。两个方法默认都是升序，也可以重写比较器，实现降序。的两个元素的位置，返回值为负数时，不交换。记住第一个参数去比较第二个。请你使

dushine00 / 0评论 2020-02-21

排序算法: 归并排序

对一个等待排序的数组A，以及排序函数sort，以及合并两个有序数组的函数merge。则 sort = merge，上面这个推导公式看起来是满足递归算法的重复条件。

dbhllnr / 0评论 2020-02-18

STL sort 源码解析

虽然源码解析的代码比较老但是核心思想并没有太多变化并且直接看源码有太多细节我又看不懂最新的。STL的sort算法，数据量大时采用Quick Sort，分段递归排序，一旦分段后的数据量小于某个门槛，为例避免Quick Sort的递归调用带来过大的额外负荷，就

zhujiangtaotaise / 0评论 2020-01-26

网站维护：Linux服务器查看外网访问IP指令汇总

Shellnetstat -ntu | awk ‘{print $5}‘ | cut -d: -f1 | sort | uniq -c | sort -n1netstat -ntu | awk ‘{print $5}‘ | cut -d: -f1 | so

chenchuang / 0评论 2020-01-25

七、排序

在c++算法库里有一个强大的排序函数sort,使用方便，速度快，基本上能解决我们在平时遇到的大多数排序问题，使用 sort函数需要包含算法库：#include <algorithm>. int a[5] = {1, 3, 4, 2, 5};re

troysps / 0评论 2020-01-24

rust sort

给定由一些正数组成的数组A，返回由其中三个长度组成的、面积不为零的三角形的最大周长。/// let mut v = [5, 4, 1, 3, 2];

lihn / 0评论 2020-01-19

Linux-查看cpu核数和个数、查看内存的命令

cat /proc/cpuinfo | grep ‘physical id‘ | sort | uniq | wc -l

jiangtie / 0评论 2020-01-17

shell-分析服务器日志

awk ‘{++S[$1]} END {for print a,S[a]}‘ log_file > log.txtsort -n -t ‘ ‘ -k 2 log.txt 配合sort进一步排序。grep ^111.111.111.111 log_f

fendou00sd / 0评论 2020-01-07

Mysql唯一索引线上故障记录

Mysql插入一条数据时，未指定自增键的值却报错：自增键重复，无法插入！`id` int NOT NULL COMMENT '主键',`name` varchar CHARACTER SET utf8mb4 COLLATE utf8mb4_general_

cyhgogogo / 0评论 2020-01-06

《Linux Shell》之四：文件的排序、合并和分割

Linux的文本处理命令，包含sort、uniq、join、cut、paste、split、tr、tar，这些命令能实现对文件记录排序、统计、合并、提取、粘贴、分割、过滤、压缩和解压缩等，它们与sed和awk一起构成了Linux文本处理的所有命令和工具。p

dazhi00 / 0评论 2013-06-11

学习PHP sort()：数组排序

sort() 函数调用结束后， arr 数组元素会按照从低到高的顺序重新排列。

清风徐来水波不兴 / 0评论 2019-12-24

Golang---sort包

　　Go 语言标准库 sort 包中实现了几种基本的排序算法：插入排序、快速排序和堆排序，但是在使用 sort 包进行排序时无需具体考虑使用哪种排序方式，因为该方法会根据传入的排序的数据量来进行自动选择合适的排序算法。// Len is the numbe

Happyunlimited / 0评论 2019-12-13

python 归并排序

while j < len and h < len:. a = [4, 7, 7, 1, 2, 9]

SDUTACM / 0评论 2019-12-12

在命令行用 sort 进行排序

在 Linux、BSD 或 Mac 的终端中使用 sort 命令，按自己的需求重新整理数据。安装你不必安装 sort ，因为它向来都包含在 POSIX 系统里。在大多数 Linux 系统中，sort 命令来自 GNU 组织打包的实用工具集合中。本文中我尽量

webstars / 0评论 2019-12-09

JavaScript数据结构与算法-Sort-(leetcode原题)

我们假设计算机运行一行基础代码需要执行一次运算。for { // 需要执行 次。这个方法需要 = 2n + 2 次运算。我们把 算法需要执行的运算次数 用 输入大小n 的函数 表示，即 T 。算法的空间复杂度 算法的空间复杂度不计算实际

鱼天翱 / 0评论 2019-11-17

数据结构与算法（三）：带你读懂选择排序（Selection sort）

选择式排序也属于内部排序法，是从欲排序的数据中，按指定的规则选出某一元素，再依规定交换位置后达到排序的目的。，第 i 次从 arr[i-1]~arr[n-1]中选取最小值，与 arr[i-1]交换，…, 第 n-1 次从 arr[n-2]~arr[n-1]

算法改变人生 / 0评论 2019-11-08

shell脚本学习（7）sort

2 参数 -t 用单个符char作为默认的字段分隔符， 默认字段分隔符是空白。一般是 -t分割好字段， 再在字段中。k1 说明指定字段1， 键值会从该字段的开始， 一直到字段结束而非字段的结尾。排序1 这种排序没看出是做什么用的。排序2 k用逗号修饰，

Yyqingmofeige / 0评论 2019-10-30

mongodb - 关联字段

varSchema=mongoose.Schema;title:String,author:String,body:String,comments:[{body:String,date:Date}],date:{type:Date,default:Date

believe0slwx / 0评论 2019-10-28

PAT 甲级 1067 Sort with Swap(0, i) (25 分)(贪心,思维题)*

For example, to sort {4, 0, 2, 1, 3} we may apply the swap operations in the following way:. Now you are asked to find the minim

yuanran0 / 0评论 2019-10-26

堆排序的python实现

l = [5, 2, 7, 8, 6, 1, 4, 9, 10, 1, 2, 3, 4, 100]

georgeandgeorge / 0评论 2019-10-20

Python实现的插入排序，冒泡排序，快速排序，选择排序算法示例

本文实例讲述了Python实现的插入排序，冒泡排序，快速排序，选择排序算法。分享给大家供大家参考，具体如下：。position = position_key #将数据分成前后两个子序列。冒泡排序 ： [2, 11, 12, 23, 34, 34, 56,

blackeagleoht / 0评论 2019-05-04

python sort、sort_index方法代码实例

本文实例为大家分享了python sort、sort_index的具体代码，供大家参考，具体内容如下。以上所述是小编给大家介绍的python sort、sort_index方法详解整合，希望对大家有所帮助，如果大家有任何疑问请给我留言，小编会及时回复大家的

JnX / 0评论 2019-03-28

详解python中sort排序使用

昨天一学妹问我一个关于python的问题，当时在外忙碌，没时间细看。今天看一下，咋一看我还真的不知道这个问题，bookinfo.sort是如何排序的。但是我猜测应该是按照第二个元素排序，如果第二个元素相同，就按照第二个元素和第三个元素的比值排序。猜测归猜测

zlfing / 0评论 2019-03-23

JS简单数组排序操作示例【sort方法】

本文实例讲述了JS简单数组排序操作。分享给大家供大家参考，具体如下：。var arr = [1, 7, 10, 4, 6];更多关于JavaScript相关内容感兴趣的读者可查看本站专题：《JavaScript数组操作技巧总结》、《JavaScript排序

jimeshui / 0评论 2019-05-17

linux sort,uniq,cut,wc命令详解

sort 命令对 File 参数指定的文件中的行排序，并将结果写到标准输出。如果要对/etc/passwd,先以第六个域的第2个字符到第4个字符进行正向排序，再基于第一个域进行反向排序。查看/etc/passwd有多少个shell:对/etc/passwd

AshaLv / 0评论 2015-01-11

转一个linux apache 日志分析与状态

问题1：在apachelog中找出访问次数最多的10个IP。awk '{print $1}' apache_log |sort |uniq -c|sort -nr|head -n 10. awk首先将每条日志中的IP抓出来，如日志格式被自定义过，可以-F定

daidaizhuzhu / 0评论 2013-01-05

平时整理的非常实用的linux命令

. netstat -nat |awk '{print $6}'|sort|uniq -c|sort -rn 或。netstat -n | awk '/^tcp/ {++S[$NF]};END {for print a, S[a]}'. 或cat acce

傻小烨 / 0评论 2012-05-22

Linux 网络状态

netstat -na|grep ESTABLISHED|awk '{print $5}'|awk -F: '{print $1}'|sort|uniq -c|sort -r | more

xiefei0 / 0评论 2012-01-10

SED/AWK

替换两文件中的单词，合并输出到另一文件。

misszc / 0评论 2011-11-13

hadoop sort 自定义排序(三个数比较写法)

如果要想让v2也进行排序，需要把k2和v2组装成新的类，作为k2，才能参与比较。// 1.1 告诉干活的人 输入流位置 读取hdfs中的文件。每一行解析成一个<k,v>。每一个键值对调用一次map函数

xclxcl / 0评论 2014-12-10

Linux 网站维护常用命令

netstat -n | awk '/^tcp/ {++state[$NF]}; END {for print key,"\t",state[key]}'. netstat -n | awk '/^tcp/ {++arr[$NF]};E

lfjjia / 0评论 2011-06-17

linux文本处理 sort,grep,sed,awk笔记

-w统计单词数量~-q显示有无差异，不显示详细的信息~-c显示全部内文，并标出不同之处~-b不检查空格字符的不同~-r比较子目录中的文件~#sed -n '1,4p' /etc/passwd 打印1~4行,-n　--quiet以免先打印出passwd的全部

Attend / 0评论 2011-05-23

[转]Shell分析access_log

whats / 0评论 2011-04-10

Linux查看系统cpu个数、核心数、线程数

grep 'processor' /proc/cpuinfo | sort -u | wc -l

chenjiawei / 0评论 2013-09-25

linux下使用shell查看apache IP访问量

netstat -nat |awk ‘{print $6}’|sort|uniq -c|sort -rn. netstat -n | awk ‘/^tcp/ {++S[$NF]};END {for print a, S[a]}’。netstat -n |

leeknives / 0评论 2013-04-10