linux sed 命令的简单应用

WilliamLin 2012-01-28

linux sed 命令 是linux shell脚本中比较重要的命令，下面就根据一个小小的需求来琢步分解一条较复杂的sed命令。

首先创建一个测试文档,命名为 test.log

1
2
3
4
5
1 li.maoyuan cost=123ms
2 mao.yuan cost=234ms
3 maoyuan.li cost=345ms
4 li.mao.yuan cost=456ms
5 mao.yuan.li cost=567ms

需求是将这个日志中包含 “li” 的记录，中间名称部分和后面的消费时间，拼成一句sql ，并存入数据库。

期望的结果是

1
2
3
4
insert into values ("li.maoyuan","123")
insert into values ("maoyuan.li","345")
insert into values ("li.mao.yuan","456")
insert into values ("mao.yuan.li","567")

下面来一步步的分解。

首先利用grep命令来过滤 “li”

1
2
3
4
5
[root@web68 sed]# grep 'li' test.log
1 li.maoyuan cost=123ms
3 maoyuan.li cost=345ms
4 li.mao.yuan cost=456ms
5 mao.yuan.li cost=567ms

然后来删掉记录前面的数字

1
2
3
4
5
[root@web68 sed]# grep 'li' test.log | sed 's/. //'
li.maoyuan cost=123ms
maoyuan.li cost=345ms
li.mao.yuan cost=456ms
mao.yuan.li cost=567ms

解释：sed ‘s/. //’ linux sed 命令中的s标识，利用正则表达式来进行替换 ，正式表达式 /. / 是点加一个空格，意思是任意字符加一个空格。

然后同样利用linux sed 命令中的s来删掉”cost=”和”ms”

1
2
3
4
5
[root@web68 sed]# grep 'li' test.log | sed 's/. //' | sed 's/cost=//' | sed 's/ms//'
li.maoyuan 123
maoyuan.li 345
li.mao.yuan 456
mao.yuan.li 567

最后利用linux gawk命令把结果拼出SQL，并输出到result.log文件中

1
2
3
4
5
[root@web68 sed]# grep 'li' test.log | sed 's/. //' | sed 's/cost=//' | sed 's/ms//' | gawk '{print "insert into values (\""$1"\",\""$2"\");"}'; > resutl.log
insert into values ("li.maoyuan","123");
insert into values ("maoyuan.li","345");
insert into values ("li.mao.yuan","456");
insert into values ("mao.yuan.li","567");

这样就大功造成了，一句看似很复杂的命令集，其实都是若干个最基本点组成的。

linux sed的基本命令可以去这里了解 http://ericyuen.blogbus.com/logs/4819803.html

转载请保留出处 - linux sed 命令的简单应用
WilliamLin

WilliamLin

相关推荐

Shell用sed命令删除特定行的方法

sed命令作为一个强大的shell命令，可以快速删除任意特定的行列，配合awk命令可以轻松地操作批量处理文件，下面就来看看吧！-e[默认选项]：只在命令行输出，而文件不改变。有了以上的这几个命令，就可以非常轻松地对文件进行处理咯?

lianshaohua / 0评论 2020-10-20

Shell文本处理三剑客之sed的使用

sed 是 stream editor 的缩写，流编辑器，主要用于对标准输出或文件进行处理。# -n 只打印静默模式匹配行，而不输出原行。# -e 追加一组编辑命令。# -f 把所有编辑命令保存在文件中，适用于复杂编辑操作。# -E 支持扩展正则表达式。#

thickbookszone / 0评论 2020-10-16

Shell—正则表达式（grep命令、sed工具）

正则表达式对于系统管理员来说是非常重要的，熟练运用正则表达式可使工作变得更加简单、方便。简单来说，是一种匹配字符串的方法，通过一些特殊符号，实现快速查找、删除、替换某个特定字符串。正则表达式对于系统管理员来说是非常重要的，系统运行过程中会产生大量的信息，这

rechanel / 0评论 2020-11-16

Linux基础练习题答案7.15

awk -F: ‘{print $7}‘ passwdsed -r ‘s#(.*:)(.*)#\2#g‘ passwd. grep -v ‘qiudao‘ test.txtsed -n ‘/qiudao/p‘ test.txt awk ‘/qiudao/‘

sunln00 / 0评论 2020-07-17

[Linux Shell学习系列十四]sed和awk-6.awk与Shell

我们可以将awk和Shell脚本结合使用来执行各种任务。一般会将信息传入awk脚本，再将信息以对Shell有用的格式传回。如使用shell变量来保存awk程序搜索用的模式是很常见的。1）最常见的方法：使用Shell引用来替换变量的值到Shell脚本内部的a

fendou00sd / 0评论 2020-06-16

grep中使用\"d\"匹配数字不成功的原因解决

首先正则表达式分为三类。在很多文本编辑器或其他工具里，正则表达式通常被用来检索或替换那些符合某个模式的文本内容。正则表达式这个概念最初是由Unix中的工具软件普及开的。

NBkiller / 0评论 2020-06-14

[Linux Shell学习系列十四]sed和awk-3.sed命令实例

Solaries - Sysadmin, Recovery etc.Windows - Sysadmin etc.‘ info.txt. #2）从指定的行开始删除，每隔固定的行数删除一行。

河的第三条岸 / 0评论 2020-06-12

linux正则应用场景

sed 本身也是一个管线命令，可以分析 standard input 的啦！而且 sed还可以将数据进行取代、删除、新增、撷取特定行等等的功能呢。在一般 sed 的用法中，所有来自 STDIN 的数据一般都会被列出到屏幕上。但如果加上 -n 参数后，则只有

Darklovy / 0评论 2020-06-07

Jenkins 初始化时，安装插件太慢或者失败

-----. -----. systemctl restart jenkins.service

wugang0 / 0评论 2020-05-25

linux sed使用

sed 是一种流编辑器，它是文本处理中非常重要的工具，能够完美的配合正则表达式使用，功能不同凡响。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”，接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重

playlinuxxx / 0评论 2020-05-11

linux 正则表达式,sed使用

代表任意一个字符。">>" 追加重定向，追加内容文件尾部。" " 双引号，具有变量直换功能，解析变量后输入 结果，不加引号相当于双引号。` tab 上面的引号，两个 `中间为命令，会先执行，等价$()。逻

qidu / 0评论 2020-04-26

linux中 替换内容的命令

hello<Enter>：向上查找hello匹配字符串。除此之外，hello还可以使用一些特殊字符，包括，其中前三个这两个是vi与vim通用的，“/”为转义字符。-i表示操作的是文件，``括起来的grep命令，表示将grep命令的的结果作为操作

farwang / 0评论 2020-04-26

shell

1.删除空行。sed ‘/^$/d‘ file. 2.删除行首空格。sed ‘s/^ *//g‘ file. sed ‘s/^[[:space:]]*//g‘ file

lishaokang / 0评论 2020-04-22

sed命令在mac和linux下的区别

在 Mac 上使用 sed 命令和 linux 上会有一定区别，主要是mac下必须指定备份格式，和mac下插入需要添加换行。上面这行代码，可以在 linux 上运行，作用是将hello.text文件中找到的 hello 替换为 world，并且直接保存修改

昭君出塞 / 0评论 2020-04-15

文本处理-sed

vim 文本编辑器sed awk 行编辑器sed 的基本工作方式是： 将文件以行为单位读取到内存 使用sed的每个脚本对该行进行操作 处理完成后输出该行sed 的替换命令 s：# 将单行的old字符串替换成new字符串，仅替换第一次 sed ’s/old/

圆圆的世界CSDN / 0评论 2020-04-06

Zabbix监控客户端及实现邮件、微信报警

[ zabbix-3.2.1]# ./configure --prefix=/usr/local/zabbix --enable-agent && make && make install. [ /]# chown -R z

cdkey / 0评论 2020-03-07

python3 实现类似sed修改文件功能

#!/usr/bin/env python3. f1 = open(file=file_name,mode='r',encoding='utf-8'). f2 = open(file=file_name+'_new',mode='w',encoding='

文山羊 / 0评论 2020-02-14

【linux 常用工具总结】sed 工具使用总结

本文主要对linux三剑客之一的sed工具进行介绍，并对该工具的使用进行简单的说明。另外，sed可以配合正则表达式进行使用， 大大增加了该工具的可用性。sed本质上一个管道命令，可以对标准输入进行分析，编辑，替换，删除等操作。在使用sed时，需要先确定需要

Attend / 0评论 2020-02-01

linux 给文件替换字符串/替换内容/替换某行 (shell,sed)

本文是要讲linux 不打开文档/文件的情况下，替换文本内容。话题相关#linux 文件替换字符串#sed 字符串替换#shell 文件替换某行#linux 替换指定行内容#linux 替换某行。并不改变原文件内容sed ‘作用范围s/替换查找目标/替换成

圆圆的世界CSDN / 0评论 2020-01-30

Linux一键部署oracle安装环境脚本(推荐)

###BASE指的是ORACLE_BASE的一级目录，如ORACLE_BASE=/u01/app/oracle,则BASE为/u01. awk -F'-[0-9]' '{print $1}' Package_list |awk '{print $1}' |

Jesus0 / 0评论 2020-01-15

正则表达式sed学习（二）

sedsed是一个流编辑器,非交互式的编辑器,它一次处理一行内容.处理时,把当前处理的行存储在临时缓冲区中，称为“模式空间”接着用 sed 命令处理缓冲区的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有

jyj00 / 0评论 2020-01-08

Linux sed命令用法

查看文件song.txt的第190行到196行，sed用法 sed是一个非交互性文本流编辑器，它编辑文件或标准输入导出的文件拷贝。也可以在一个文件中写入命令，在使用sed时，sed并不于初始化文件打叫道，它操作的只是一个拷贝，然后所有的改动。因为sed是一

dongfangxiaozi / 0评论 2013-07-21

Shell脚本实现对文件编辑

常见Linux文件的编辑命令 vi/vim，有时候我们想写一个脚本实现对文件编辑，这个时候，可能就不够用了，下面介绍一些办法1、echo命令Shell的echo命令常用于字符串的输出例如：[ zxy]# echo ‘Hello World !‘ >

Yyqingmofeige / 0评论 2019-12-19

shell脚本修改文件

[ zxy]# sed -i ‘s|aaaa|bbbb|‘ file1[ zxy]# cat file1 Good LuckHello World !

Sabrina / 0评论 2019-12-19

Shell编程—sed进阶

sed编辑器包含了三个可用来处理多行文本的特殊命令。小写的n命令会告诉sed编辑器移动到数据流中的下一文本行，而不用重新回到命令的 开始再执行一遍。由于要删除的行是空行，没有任何能够标示这种行的文本可供查找。解决办法是用n命令。下面的例子演示了N命令的工作

Yyqingmofeige / 0评论 2019-12-15

shell编程之正则表达式（二）sed工具

sed是一个强大而简单的文本解析转换工具，可以读取文本，并根据指定的条件对文本内容进行编辑，最后输出所有行或者仅输出处理的某些行。sed 也可以在无交互的情况下实现相当复杂的文本处理操作，被广泛应用于 Shell 脚本中，用以完成各种自动化处理任务。sed

酷云的csdn / 0评论 2019-12-04

正则表达式及三剑客（grep，awk，sed）详解

正则表达式是对字符串操作的一种逻辑公式，就是用事先定义好的一些特定字符、及这些特定字符的组合，组成一个“规则字符串”，这个“规则字符串”用来表达对字符串的一种过滤逻辑。但如果加上-n参数后，则只有经过sed特殊处理的那一行才会被列出来。awk是一个强大的工

Darklovy / 0评论 2019-12-03

shell脚本编程之正则表达式（二）（扩展正则表达式、sed）

本文主要是对扩展正则表达式的介绍，同时，继续按照上篇文章的风格介绍sed文本处理工具，sed作为shell编程中“三剑客”之一，在对文本处理上有巨大作用。egrep 命令是一个搜索文件获得模式，使用该命令可以搜索文件中的任意字符串和符号，也可以搜索一个或多

赵家小少爷 / 0评论 2019-12-03

shell之正向解析脚本的实现方法

sed -i '21s/localhost/any/' /etc/named.conf //把主配置文件的21行localhost换成any. cp -p named.localhost cwq.com.zone //复制模板到我们自己设置的数据区域配

libao / 0评论 2019-10-12

Linux sed命令详解

sed 是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”，接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重

wannagonna / 0评论 2013-09-18

awk合并行、linux shell 字符串操作、sed字符替换

在做shell批处理程序时候，经常会涉及到字符串相关操作。有很多命令语句，如：awk,sed都可以做字符串各种操作。其实shell内置一系列操作符号，可以达到类似效果，大家知道，使用内部操作符会省略启动外部程序等时间，因此速度会非常的快。如果var没有被声

yoshubom / 0评论 2015-01-18

how to replace a file string using sed in linux

1. 已有的命令。3、 查询

Rafema / 0评论 2015-03-11

Zabbix监控客户端及实现邮件、微信报警

[ zabbix-3.2.1]# ./configure --prefix=/usr/local/zabbix --enable-agent && make && make install. [ etc]# sed -i ‘

浪味仙 / 0评论 2019-11-10

正则表达式及编程三剑客（grep、sed、awk）命令详解

正则表达式又称正规表达式、常规表达式。在代码中常简写为regex、regexp或RE。正则表达式是使用单个字符串来描述，匹配一系列符合某个句法规则的字符串。简单的说，正则表达式是一种匹配字符串的方法，通过一些特殊符号，实现快速查找、删除、替换某个特定字符串

qidu / 0评论 2019-11-10

mac sed目录文件内容替换

支持八进制，格式为“\o + 两位或三位八进制数”，如“\o077 或\o77 均代表字符 ？，\o101代表字符 A ”

YSZhang / 0评论 2015-09-07

【转帖】vim/sed/awk/grep等文件批处理总结

特别适用于表格编辑。:20,100s/bc/a&d/g # 表示把bc替换为abcd（& 是一个特殊字符，表示被替换的内容。:let counter=0|10,20g//let counter=counter+1|s/^

圆圆的世界CSDN / 0评论 2019-11-07

Linux重要命之sed命令详解

Sed 代表流编辑器Stream Editor，常用于 Linux 中基本的文本处理。sed 命令是 Linux 中的重要命令之一，在文件处理方面有着重要作用。可用于删除或移动与给定模式匹配的特定行。它还可以删除文件中的特定行，它能够从文件中删除表达式，文

JoShua的水库 / 0评论 2019-10-20

正则表达式分类 区别

许多程序设计语言都支持利用正则表达式进行字符串操作。例如，在Perl中就内建了一个功能强大的正则表达式引擎。正则表达式这个概念最初是由Unix中的工具软件普及开的。正则表达式通常缩写成“regex”，单数有regexp、regex，复数有regexps、r

xiahanss / 0评论 2017-11-06

linux基础练习4

lp，gdm的所有文件。用户可以根据需要下载对应的rpm包来实现安装rpm -ivh 命令，但是rpm命令由于不能解决软件的依赖性问题，yum的出现解决了软件彼此依赖性问题。yum软件仓库在各地分布有yum服务器，里面存放的各种软件包，当我们配置好软件仓库

kevinli / 0评论 2019-10-29

linux shell批量重名了java 类

suffix22=`echo $fileSimpleName |sed '/Test$/d'` #判断文件名称是否以Test结尾。find ./ -type f -iname "*.json"|sed 's/json$//' |xarg

liweihui / 0评论 2016-12-28

Linux下各种批量替换文件的方法（转）

find . -type f -name "*.html"|xargs grep ‘yourstring’。find -name '要查找的文件名' | xargs perl -pi -e 's|被替换的字符串|替换后的字符串|g'.

WindowsandLinux / 0评论 2016-12-13

Shell sed 命令操作手册

sed 的编辑指令均由位址与函数两部份组成 , 其中 , 在执行时 , sed 利用它的位址参数来 决定编辑的对象;而用它的函数参数编辑。此外 , sed 编辑指令 , 除了可在命令列上执行 , 也可在档案内执行。其中差别只是在命令列上执行时 , 其前必

静湖微风 / 0评论 2012-02-17

linux之sed用法

sed是一个很好的文件处理工具，本身是一个管道命令，主要是以行为单位进行处理，可以将数据行进行替换、删除、新增、选取等特定工作，下面先了解一下sed的用法。-n∶使用安静模式。在一般 sed 的用法中，所有来自 STDIN的资料一般都会被列出到萤幕上。但如

阿来小同学 / 0评论 2017-02-23

Centos7上创建Redis5集群

sed -i 's/port 6379/port 7000/g' ./7000/redis.conf. sed -i 's/# cluster-enabled/cluster-enabled/g' ./7000/redis.conf. sed -i '

jokewinl / 0评论 2019-04-15

Linux命令之文本处理

cat file1 | command > result.txt 合并一个文件的详细说明文本，并将简介写入一个新文件中。grep Aug /var/log/messages 在文件 '/var/log/messages'中查找关键词"Aug

hazing / 0评论 2017-12-01

CSS圆角区块容器生成器

.rbtop { background: url no-repeat top right; }. .rbbot { background: url no-repeat bottom right; }. /* height and width stuff,

李鴻耀 / 0评论 2006-07-24

linux 特殊字符处理 sed awk \047 \001

总结了一下，sed好像不支持＼001这种方式的土人白金，而awk支持，sed有空看一下man文档再想想有没有别个办法；也不知道vim有没有方式处理；

hengxie00 / 0评论 2017-09-07

linux （centos） shell 指定行插入文本內容，使用 sed 或awk均可实现

#如果知道行号可以用下面的方法。sed-i'88rb.file'a.file#在a.txt的第88行插入文件b.txt. #如果不知道行号，可以用正則匹配。#sed的話如果不改变源文件，可以去掉-i开关，修改会输出到STDOUT

Julyth / 0评论 2016-11-26

mac shell

find ./ -type f -iname "*.css" |xargs sed -i '' 's/dist\///'. grep "sumk-http-demo" -rl .|xargs -I {} sed -

quanhaoH / 0评论 2016-10-28

(转)mac os下sed来进行文件内容的替换操作

使用man查看命令的参数详细说明，两个系统下对参数“i”的要求不一样。Edit files in-place, saving backups with the specified extension. If a zero-length extension

KINGJENSEN / 0评论 2016-10-14