shell总结:读取文件、参数、if、分割字符串、数组长度、空文件、变量赋值、多进程、按行切割文件、查看线程

时间:2023-03-10 02:02:33
shell总结:读取文件、参数、if、分割字符串、数组长度、空文件、变量赋值、多进程、按行切割文件、查看线程

Reference:

http://saiyaren.iteye.com/blog/1943207

1.    
Shell 
读取文件和写文件

for line in $(<top30000.url.utf-8.http_server_front_hphp.txt); do

tmp_port=8080;

for((i=0;i<=7;i++));do

echo ${line/192\.168\.12\.63/192\.168\.12\.63:$tmp_port} >>top30000.url.utf-8.http_server_front_hphp_mul_port.txt;

tmp_port=$[tmp_port+1]

done;

done;

top30000.url.utf-8.http_server_front_hphp.txt
文件名

通过
< 读取文件
 line 是每行的内容

替换文件内容
:

${
变量 /
被替换内容 /
替换内容 }

替换两边的一定要注意是
{}  不是小括号

输出文件:

echo “xxxx” >
文件名

追加输出文件:

echo “xxxx” >>
文件名

第二种读取方式:

$ cat file | while read line; do echo $line; done

例:

$ cat /root/test.txt | while read line; do

echo $line;

done

输出是:

aaaa

bbbb

cccc dddd

for
的是分割输出

$ for line in $(<file); do echo $line; done

aaaa

bbbb

cccc

dddd

2.    
shell 
参数

sh test.sh 111 222 333

然后再
shell 中获取参数如下获取,如:

$1 
是第一个参数 111

$2 
是第二个参数  222

$3 
是第三个参数  333

依次类推

$0 
是 shell
本身

3.    
Shell if 
用法

if [ $1 == "aaa" ]; then

echo $line

fi

if 
后需要有空格

[
需要有空格

$1
后需要有空格

==
后需要有空格

“aaa”
后需要有空格

]
后需要有分号 (;)

;
号后有空格

如果不按照规则,那么会出现如下错误

syntax error near unexpected token `fi'
或是 then

shell
的 if else
用法:

if ....; then

....

elif ....; then

....

else

....

fi

当运行下面脚本时,如果
if  后的
 $a  不加引号,则会报:

test.sh: line 5: [: too many arguments

这个错误;所以需要先加上“”编程字符串

a="hhvm don't run"

echo $a

if [  "$a"  == "hhvm don't run" ]; then

echo "============"

fi

4.    
shell 
分割字符串

#!/bin/bash

str="hello,world,i,like,you,babalala"

arr=(${str//,/ })

for i in ${arr[@]}

do

echo $i

done

分割成数组
arr  ,用逗号分割

方法
2 :

$ cat split.sh

#!/bin/sh

# Script to split fields into tokens

# Here is the string where tokens separated by colons

s="first column:second column:third column"

ip_arr=()

IFS=":"     # Set the field separator

set $s      # Breaks the string into $1, $2, ...

i=0

for item    # A for loop by default loop through $1, $2, ...

do

ip_arr=("${ip_arr[@]}" "$item")

echo "Element $i: $item"

((i++))

done

5.    
Shell 
获取数组长度

array=(bill   chen  bai   hu);

num=${#array[@]}

遍历数组:

for((i=0;i<num;i++))

do

echo ${atrr[$i]};#
这里需要用 {}
引用上才可以

done;

6.    
shell 
创建空文件

:>input_ware_data.txt;

7.    
Shell 
执行命令后给变量赋值

$a=`pwd`;

echo $a

这样就可以输出
pwd 的返回值了

注意这里的引号是键盘
1 左边的那个按钮

8.    
使用
wget 和
curl 时出错需要用引号引用
URL

使用
wget 和
curl 时需要用引号引用住
URL

Wget –SO 
文件名   “www.baidu.com”

Curl “www.baidu.com”

9.    
Shell
累加

c=0

for((i=0;i<10;i++));do

#c++;

:  $[c++]

echo $c;

done;

这样去实现累加:

:  $[c++]

冒号和
$ 之间要有空格

10.          
Shell 
整除

c=90010

echo $((c/1000))

输出
90

11.          
Shell 
赋值

i=$((c/1000));

赋值语句前后不能有空格

12.          
Shell 
多进程

for ((i=0;i<5;i++));do

} &

&
shell

13.
   执行语句后面加上
2>/dev/null 就可以清楚系统的输出信息

如:

Curl  www.baidu.com  2>/dev/null

这样就不会输出提示信息了

14.          
Shell 
创建文件夹

mkdir –p [
文件夹 ]

-p 
是递归创建

15.          
shell
获取时间戳

参考网址:

http://www.2cto.com/os/201109/105312.html

当前时间戳:(年月日时分秒)

a=`date  +%Y%m%d%H%M%S`

echo $a;


6 天时间戳:(年月日时分秒)

a=`date -d "-6 day"  +%Y%m%d%H%M%S`

echo $a;

-d 
中可以是 hour , day,week

16.          
Shell 
数组

A=(a b c def)

for i in "${A[@]}"; do

echo $i

done

#
输出 A
的下标

echo ${A[1]}

参考:

http://doudouclever.blog.163.com/blog/static/17511231020127288621354/

17.          
获取输入参数数组

for i in "$@"; do

echo $i

done

$@
是获取的输入参数的数组, $i
是获取的输入的每个参数的值


test.sh 1 2 33

输出的内容为:

1

2

33

这就是获取到的
3 个输入参数,输入多少个参数都可以

18.
           Find 
遍历 删除

for file in `find . -name "Runtime"`;do

echo "$file==========="

rm -rf $file/*;

ls -l $file;

done;

19.          
shell 
求余

i=$((2000%1000));

echo $i;


 %  求余

20.          
Shell 
字符串连接

a=”aa”;

a=$a"bb";

echo $a;

输出是
aabb

21.          
Shell 
抽取字符 awk

如日志是这样的:

14.245.173.44 - - [25/Apr/2013:22:24:13
+0800] "GET
/ProductPageService.aspx?method=GetCommentSummaryBySkuId&referenceId=1008195527&callback=getCommentCount
HTTP

每个空格就是一个位置,那么抽取

/ProductPageService.aspx?method=GetCommentSummaryBySkuId&referenceId=1008195527&callback=getCommentCount

这个就是第
7 位

awk '{print $7}' clubservice_aspx.log >cbs.log

抽取文件
clubservice_aspx.log ,然后输出到
cbs.log

详细的见下面的
url

http://hi.baidu.com/ziyingshaozhu/item/8473541d9cf6028488a95681

22.          
shell 
按行切割文件

#
按每个文件
1000 行来分割除

split -l 1000 httperr8007.log httperr

split  -l 
行数   切割的文件  
生成文件前缀

详细见:

http://blog.sina.com.cn/s/blog_62db9b1901017aiz.html

23.          
查找目录下的所有文件

a=`ls cbs`

#echo $a

for file in $a;do

echo $file

done

24.          
shell 
判断为空

1.  变量通过
" " 引号引起来

如下所示 :
,可以得到结果为  IS NULL.

#!/bin/sh

para1=

if [ ! -n "$

echo "IS NULL"

else

echo "NOT NULL"

fi

if [ -z $para1 ];then

echo “is null”

fi

2.  直接通过变量判断

如下所示 :
得到的结果为 : IS NULL

#!/bin/sh

para1=

if [ ! $para1 ]; then

echo "IS NULL"

else

echo "NOT NULL"

fi

3.  使用
test 判断

得到的结果就是
: dmin is not set!

#!/bin/sh

dmin=

if  test -z "$dmin"  then

echo "dmin is not set!"

else

echo "dmin is set !"

fi

4.  使用
"" 判断

#!/bin/sh

dmin=

if [ "$dmin" = "" ]; then

echo "dmin is not set!"

else

echo "dmin is set !"

fi

详细查看

http://blog.****.net/runming918/article/details/7226507

25.          
shell 
逻辑运算符

一、逻辑运算符

逻辑卷标

表示意思

1.

关于档案与目录的侦测逻辑卷标!

-f

常用!侦测『档案』是否存在
 eg: if [ -f filename ]

-d

常用!侦测『目录』是否存在

-b

侦测是否为一个『  block 
档案』

-c

侦测是否为一个『  character 
档案』

-S

侦测是否为一个『  socket 
标签档案』

-L

侦测是否为一个『  symbolic link 
的档案』

-e

侦测『某个东西』是否存在!

2.

关于程序的逻辑卷标!

-G

侦测是否由  GID 
所执行的程序所拥有

-O

侦测是否由  UID 
所执行的程序所拥有

-p

侦测是否为程序间传送信息的
 name pipe  或是
 FIFO  (老实说,这个不太懂!)

3.

关于档案的属性侦测!

-r

侦测是否为可读的属性

-w

侦测是否为可以写入的属性

-x

侦测是否为可执行的属性

-s

侦测是否为『非空白档案』

-u

侦测是否具有『  SUID 
』的属性

-g

侦测是否具有『  SGID 
』的属性

-k

侦测是否具有『  sticky bit 
』的属性

4.

两个档案之间的判断与比较
 
;例如
[ test file1 -nt file2 ]

-nt

第一个档案比第二个档案新

-ot

第一个档案比第二个档案旧

-ef

第一个档案与第二个档案为同一个档案(
 link  之类的档案)

5.

逻辑的『和 (and)
』『或 (or)

&&

逻辑的  AND 
的意思

||

逻辑的  OR 
的意思

运算符号

代表意义

=

等于  
应用于:整型或字符串比较  
如果在
[]  中,只能是字符串

!=

不等于  
应用于:整型或字符串比较  
如果在
[]  中,只能是字符串

<

小于  
应用于:整型比较  

[]  中,不能使用
  表示字符串

>

大于  
应用于:整型比较  

[]  中,不能使用
  表示字符串

-eq

等于  
应用于:整型比较

-ne

不等于  
应用于:整型比较

-lt

小于  
应用于:整型比较

-gt

大于  
应用于:整型比较

-le

小于或等于  
应用于:整型比较

-ge

大于或等于  
应用于:整型比较

-a

双方都成立( and
)  
逻辑表达式  –a 
逻辑表达式

-o

单方成立( or
)  
逻辑表达式  –o 
逻辑表达式

-z

空字符串

-n

非空字符串

参考网址:

http://www.cnblogs.com/chengmo/archive/2010/10/01/1839942.html

26.          
curl
引用 cookie

curl –b test=”aaa”  http://club.jd.com

-b name=”value”

Test
是 name

Aaa
是 value

27.          
查看进程使用物理内存

Ps aux|grep xxx

查询出
pid

比如
pid  是
11460 那么查询物理内存就如下:

cat  /proc/11460/status|grep VmRSS

返回结果:

VmRSS: 190332 kB VmRSS: 190332 kB

28.          
Grep 
不区分大小写

grep –i  “aaa”

29.          
awk 
分割字符串

a.        
log
中的信息为:

a:1

b:2

c:3

…..

然后通过
: 分割,那么
a,b,c 就是
$1;1,2,3 就是
$2
写法如下:
-F  后面写上分割的符号

cat a.log|awk -F ':' '{print $1}'

30.          
查看线程

ps -eLf|grep hhvm

31.          
shell 
提示符,输入内容进行选择

如提示内容,然后输入
yes no  等等的,然后进入不同分支

while true;do

#stty -icanon min 0 time 100

echo -n "Automatic execute ten seconds after,Are you sure you want to start the task(yes or no)?"

read Arg

case $Arg in

c)

echo "cc"

exit;;

Y|y|YES|yes)

break;;

N|n|NO|no)

exit;;

"")  #Autocontinue

break;;

esac

done

echo

echo "others function..."

32.          
curl 
获取 http
状态

http_status=`curl -s -w %{http_code} -o /dev/null -e $REFERER_URL "$line" 2>/dev/null `;

-s 
是清楚垃圾信息;

-w

33.          
Cp  
强制覆盖

yes|cp a.txt /export/

用管道线默认确认提示