文件过滤分割与合并
1、grep命令
grep(global regular expression print)全面搜索正则表达式并把行打印出来,是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹配的行打印出来。 -a 不要忽略二进制数据。
-A<显示列数> 除了显示符合范本样式的那一行之外,并显示该行之后的内容。
-b 在显示符合范本的数据之外,并显示该行之前的内容。
-c 计算符合范本样式的列数。
-C<显示列数> 除了显示符合范本样式的那一列之外,并显示该列之前后的内容。
-d<进行动作> 当指定要查找的是目录而非文件时,必须使用这参数,否则grep命令将回报信息并停止动作。
-e<范本样式> 指定字符串作为查找文件内容的范本样式。
-E 能使用扩展正则表达式
-f<范本文件> 指定范本文件,其内容有一个或多个范本样式,让grep查找符合范本条件的文件内容,格式为每一列的范本样式。
-F 将范本样式视为固定的字符串列表。
-G 将范本样式视为普通的表示法来使用。
-h 在显示符合范本样式的那一列之前,不标示该列所属的文件名称。
-H 在显示符合范本样式的那一列之前,标示该列的文件名称。
-i 忽略大小写的差别。
-l 列出文件内容符合指定的范本样式的文件名称。
-L 列出文件内容不符合指定的范本样式的文件名称。
-n 在显示符合范本样式的那一列之前,标示出该列的编号。
-q 不显示任何信息。
-R/-r 此参数的效果和指定“-d resource”参数相同。
-s 不显示错误信息。
-v 反转查找。
-w 只显示全字符合的列。
-x 只显示全列符合的列。
-y 此参数和 -i效果相同。
-o 只输出文件中匹配到的部分。 grep命令的常见用法
在文件中搜索一个单词,命令会返回一个包含“match_pattern”的文本行:
grep match_pattern file_name
grep "match_pattern" file_name 在多个文件中查找
grep match_pattern file_name1 file_name2 输出除匹配到的所有行之外的 -v选项
grep -v match_pattern file_name 标记匹配颜色选项
grep match_pattern file_name --color=auto 使用正则表达式-E选项:
grep -E "[1-9]+" 只输出文件中匹配到的部分 -o选项
echo this is a test line. | grep -o -E "[a-z]+\.
echo this is a test line. | egrep -o -E "[a-z]+\. 统计文件或者文本中包含匹配字符串的行数-c选项
grep -c "match_pattern" file_name 输出包含字符串的行数-n选项
grep “text” -n filename 或 cat file_name | grep "text" -n 打印样式匹配所位于的字符或者字节偏移
echo gun is not unix | grep -o -b "not" 搜索多个文件并查找匹配文本在哪些文件中:
grep -l "text" file1 file2 file3…… 在多级目录中对文本进行递归搜索:
grep “text” . -r -n 忽略匹配样式中的字符的大小写
echo hello world | grep -i "hello" 选项 -e 制动多个匹配样式:
echo this is a text line | grep -e "is" -e "line" -o 在grep搜索结果中包括或者排除指定文件:
//只在目录中搜索所有的.php和.html文件中递归搜索字符“main()”
grep "main()" . -r --include *.{php,html} grep静默输出
grep -q “test” filename 打印出匹配文本之前或者之后的行;
//显示匹配某个结果之后的3行,使用-A选项
seq 10 | grep "5" -A 3
//显示匹配某个结果之前的3行,使用-B选项
seq 10 | grep "5" -B 3
//显示匹配某个结果的前三行和后三行,使用-C选项
seq 10 | grep "5" -C 3
//如果匹配结果有多行,会用“--”作为各匹配结果之间的分隔符:
echo -e "a\nb\nc\na\nb\nc" | grep a -A 1
2、sort命令
sort命令是在Linux中非常有用,它将文本尽心排序,并将排序结果标准输出。sort命令既可以从特定的文件,也可以从stdin中获取输入 语法
sort(选项)(参数)
选项
-b:忽略每行最前面的空格
-c:检查文件是否按顺序排序
-d:处理英文字母、数字及空格字符外,忽略其他的字符;
-f:排序时将小写字母视为大写字母;
-m:将几个排序号的文件进行排序;
-n:按照数值的大小排序;
-o<输出文件>:将排序后的结果存入制定的文件;
-r:以相反的顺序来排序; 参数
文件:指定待排序的文件列表 实例
sort sort.txt
sort -u sort.txt //忽略相同行
或者 uniq sort.txt 将第二列按数字从小到大的排列
sort -nk 2 -t: sort.txt
将第三列按数字从大到小的顺序排列
sort -nrk 3 -t: sort.txt