1、腳本之間傳遞參數(shù) "1.sh"的腳本，接受參數(shù)。如下，如果有一個(gè)參數(shù)則賦值個(gè)sourceFile這個(gè)變量，否則用默認(rèn)值。

Shell代碼

#!/bin/bash

【資料圖】

LANG=en_US.UTF-8

#get parameters

sourceFile="/data/log/abc"

if [ $# == 1 ]

then sourceFile=$1

else echo "$1 required!"

fi

echo $sourceFile

備注：這里$#是傳遞參數(shù)的個(gè)數(shù),$1 是具體的參數(shù)。 關(guān)于if else： 如果兩條命令寫在同一行則需要用";"號(hào)隔開，一行只寫一條命令就不需要寫";"號(hào)了。和[命令一樣，要注意命令和各參數(shù)之間必須用空格隔開。if命令的參數(shù)組成一條子命令，如果該子命令的Exit Status為0（表示真），則執(zhí)行then后面的子命令，如果Exit Status非0（表示假），則執(zhí)行elif、else或者fi后面的子命令。if后面的子命令通常是測(cè)試命令，但也可以是其它命令。Shell腳本沒(méi)有{}括號(hào)，所以用fi表示if語(yǔ)句塊的結(jié)束。 "2.sh"的腳本，傳遞參數(shù)

Shell代碼

#!/bin/bash

sh 1.sh 參數(shù)1 參數(shù)2 ...  

備注：多個(gè)參數(shù)之間用空格符隔開。 2、文件內(nèi)容行之間的排序

Shell代碼

#!/bin/bash

sort -t= +4 文件 ”

備注：“=”表示按=號(hào)進(jìn)行切割（注意：只能是單個(gè)字符），“+4”表示按第五個(gè)項(xiàng)進(jìn)行排序。 更多參數(shù)： -r 表示降序排序 -n 表示按數(shù)字大小排序 -k 表示根據(jù)那個(gè)字段排序，4.1,表示第4列第一個(gè)字符開始 ，5表示到第5個(gè)字段為結(jié)束 -t 后面跟分隔符，缺省是空格 例如：sort -r -n -k4.1,5 3、判斷目錄是否存在，沒(méi)有則新建一個(gè)目錄

Shell代碼

#!/bin/bash

dayDir="/home/logs/"

if [ ! -d "$dayDir" ]

then mkdir "$dayDir" fi

4、判斷文件是否存在，有則刪除

Shell代碼

#!/bin/bash

if [ -f "$FAIL_FILE" ]

then

rm -rf "$FAIL_FILE"

echo `date`" FILE IS EXISTS: "$FAIL_FILE

fi

5、找出文件中的相關(guān)行

Shell代碼

#!/bin/bash

cat 文件 |grep -a "關(guān)鍵詞" >> result.log

備注：把文件中包含關(guān)鍵詞的行輸出到result.log中。 6、文件切分

Shell代碼

#!/bin/bash

awk -F"" "{print $1}" 文件

備注：“”表示分隔符，“print”表示換行輸出（printf不換行），“$1”表示取第一項(xiàng)。“文件”表示要切分的文件 7、文件內(nèi)容排重

Shell代碼

#!/bin/bash

awk -F"," "!a[$1]++" test.txt

備注：“，”表示按“，”號(hào)分隔；“$1”表示按第一項(xiàng)排重；“test.txt”表示要處理的文件。 8、grep多個(gè)關(guān)鍵字

Shell代碼

#!/bin/bash

cat $file |grep -a "aop=keyword1\|keyword2"

備注：多個(gè)關(guān)鍵字用“\|”分隔。 9、時(shí)間格式化，中間有空格的需要加引號(hào)

Shell代碼

#!/bin/bash

TODAY=`date -d today "+%Y-%m-%d %H:%M:%S"`

10、多個(gè)文件合并

Shell代碼

#!/bin/bash

cat $FILE1 $FILE2 |grep -a "關(guān)鍵字" > $MERGE_FILE

11、運(yùn)行java項(xiàng)目

Shell代碼

#!/bin/bash

LANG=en_US.UTF-8

export LANG=$LANG

/usr/java/latest/bin/java -cp . -Djava.ext.dirs=../lib 包.類（含main方法） -a 參數(shù)1 -b 參數(shù)2

備注：“/usr/java/latest/bin/java”表示Java環(huán)境，“-cp”表示classpath路徑，“.”表示當(dāng)前目錄，“-Djava.ext.dirs”表示jar文件所在目錄，“-a”表示參數(shù)名稱，“參數(shù)1”表示參數(shù)值。 12、根據(jù)關(guān)鍵字統(tǒng)計(jì)行數(shù)，賦值給變量

Shell代碼

#!/bin/bash

COUNT=$(cat $FILE |grep -a "關(guān)鍵字" |wc -l)

備注：“$FILE”表示要統(tǒng)計(jì)的文件，“關(guān)鍵字”要包含的關(guān)鍵字，“wc”統(tǒng)計(jì)文件（-l行數(shù)，-w字?jǐn)?shù)，-c字節(jié)數(shù)） wc命令的功能為統(tǒng)計(jì)指定文件中的字節(jié)數(shù)、字?jǐn)?shù)、行數(shù), 并將統(tǒng)計(jì)結(jié)果顯示輸出。 語(yǔ)法：wc [選項(xiàng)] 文件… 說(shuō)明：該命令統(tǒng)計(jì)給定文件中的字節(jié)數(shù)、字?jǐn)?shù)、行數(shù)。如果沒(méi)有給出文件名，則從標(biāo)準(zhǔn)輸入讀取。wc同時(shí)也給出所有指定文件的總統(tǒng)計(jì)數(shù)。字是由空格字符區(qū)分開的最大字符串。 該命令各選項(xiàng)含義如下： -c 統(tǒng)計(jì)字節(jié)數(shù)。 -l 統(tǒng)計(jì)行數(shù)。 -w 統(tǒng)計(jì)字?jǐn)?shù)。 這些選項(xiàng)可以組合使用。 輸出列的順序和數(shù)目不受選項(xiàng)的順序和數(shù)目的影響?？偸前聪率鲰樞蝻@示并且每項(xiàng)最多一列。 行數(shù)、字?jǐn)?shù)、字節(jié)數(shù)、文件名 如果命令行中沒(méi)有文件名，則輸出中不出現(xiàn)文件名。 例如： $wc -lcw file1 file2 4 33 file1 7 52 file2 11 11 85 total 省略任選項(xiàng)-lcw，wc命令的執(zhí)行結(jié)果與上面一樣。 13、基本算術(shù)計(jì)算的方法（5種） a.使用awk計(jì)算

Shell代碼

#!/bin/bash

##示例1:10和12為兩個(gè)參數(shù)分別對(duì)應(yīng)$1和$2

echo 10 12 |awk "{printf("%d\n", $1+$2)}"

##示例2:a和b作為兩個(gè)變量傳入

a=10

b=12

echo |awk "{printf("%d\n", "$a"+"$b")}"  

##示例3:COUNT_FAIL除以COUNT_INIT 保留4為小數(shù)，結(jié)果賦值給FAIL_INIT，[b]結(jié)果四舍五入[/b]。

COUNT_FAIL=10

COUNT_INIT=20

FAIL_INIT=`awk "BEGIN{printf "%.4f\n","$COUNT_FAIL"/"$COUNT_INIT"}"`

echo $FAIL_INIT

備注：示例2和示例3兩種寫法除數(shù)和被除數(shù)都要加“"”號(hào)(單引號(hào))，否則會(huì)報(bào)錯(cuò)“division by zero attempted”，另外“BEGIN”也很重要哦。 b.使用bc命令

Shell代碼

#!/bin/bash

##示例1:輸出 1+2 的運(yùn)算結(jié)果

echo 1+2 |bc  

##示例2:COUNT_FAIL除以COUNT_INIT 保留2為小數(shù)，結(jié)果賦值給FAIL_INIT，[b]結(jié)果不四舍五入[/b]。

FAIL_INIT=`echo "scale=2; $COUNT_FAIL/$COUNT_INIT" | bc`

c.使用expr命令

Shell代碼

#!/bin/bash

count=10

count=`expr $count + 12`  

echo $count

d.使用let命令

Shell代碼

#!/bin/bash

##示例1

let num1=10*20  

echo $num1

##示例2

let "num2=10*20"

echo $num2

e.加雙括號(hào)

Shell代碼

#!/bin/bash

##示例1:雙小括號(hào)

a=12

b=20

echo $((a*b))  

echo $(($a*$b))

##示例2:中括號(hào)

c=10

echo $[c*20]

echo $[$c*20]

備注：此種寫法括號(hào)里面的變量可以不用加“$”符號(hào)，但是括號(hào)外面的“$”符號(hào)一定要加上。14、運(yùn)用tee命令將日志同時(shí)輸出到多個(gè)文件 tee用法功能說(shuō)明：讀取標(biāo)準(zhǔn)輸入的數(shù)據(jù)，并將其內(nèi)容輸出成文件。 語(yǔ) 法：tee [-ai][--help][--version][文件...] 補(bǔ)充說(shuō)明：tee指令會(huì)從標(biāo)準(zhǔn)輸入設(shè)備讀取數(shù)據(jù)，將其內(nèi)容輸出到標(biāo)準(zhǔn)輸出設(shè)備，同時(shí)保存成文件。 參 數(shù)： -a或--append 附加到既有文件的后面，而非覆蓋它． -i或--ignore-interrupts 忽略中斷信號(hào)。 -help 在線幫助。 -version 顯示版本信息。 例1：日志在記入log1.txt和log2.txt的同時(shí)也在控制臺(tái)輸出

Shell代碼

#!/bin/bash

echo "hello jack!" |tee -a log1.txt log2.txt  

備注：“-a”追加，否則清空重寫。 15、針對(duì)某個(gè)域進(jìn)行分組統(tǒng)計(jì)

Shell代碼

#!/bin/bash

cat $FILE |awk -F"" "{list[$11]++;}END{for (val in list) print val, list[val];}" |tee -a $RESULT_FILE

備注：“$FILE”要處理的文件，用awk命令按“”進(jìn)行切分，“$11”表示第11域（1,3,5,...）,“var”表示分組名稱，“l(fā)ist[var]”表示每組的數(shù)量。 16、查詢控制命令的歷史記錄

Shell代碼

#!/bin/bash history |grep "rm"

備注：查詢包含“rm”字符的命令記錄。 17、循環(huán)刪除所有文件

Shell代碼

#!/bin/bash

for i in `ls`; do rm $i; done

備注：在文件非常多的情況下，rm * 命令不能刪除所有文件。所以需要遍歷刪除每一個(gè)文件。 18、遍歷文件夾并按第二個(gè)域?qū)ξ募?nèi)容排序。

Shell代碼

#!/bin/bash

#用等號(hào)分隔，按第二個(gè)域排序

function sortfile(){

echo "Processing: "$1 sort -t= +1 $1 > $1"_temp"

mv $1"_temp" $1

}

#遍歷文件夾，調(diào)用排序函數(shù)

function ergodic(){

for file in `ls $1`

do

if [ -d $1"/"$file ]

then

ergodic $1"/"$file

else

f=$1"/"$file

#調(diào)用排序函數(shù)

sortfile $f

fi

done

}

#以參數(shù)形式運(yùn)行程序

if [ $# == 1 ];

then

echo "parameter: "$1;

ergodic $1

else

echo "a file directory required!"

fi

19、查看文件夾下所有文件數(shù)目和所有文件夾數(shù)目

Shell代碼

#!/bin/bash

#查看當(dāng)前文件夾下所有文件數(shù)目

find . -type f |wc -l

#查看當(dāng)前文件夾下所有文件夾數(shù)目

find . -type d |wc -l

備注：“.”表示當(dāng)前目錄，可以換成其他路徑。 20、shell與java正則區(qū)別

Java代碼

String regex = "2010-11-08.+"

//或者 regex = "2010-11-08.*"

備注：JAVA中匹配以“2010-11-08"開頭的字符串。

Shell代碼

regex = "2010-11-08*"

備注：SHELL中匹配以“2010-11-08”開頭的字符串。 “.*”或“.+”在java中表示任意多個(gè)字符串，如果要匹配“.”號(hào)，需要加轉(zhuǎn)義“\”。 “*”在shell表示任意多個(gè)字符，加“.”或“+”號(hào)都會(huì)錯(cuò)誤。 21、編碼轉(zhuǎn)換命令

Shell代碼

iconv -f gb2312 -t utf-8 a.log > b.log

備注：表示把a(bǔ).log文件從gb2312編碼轉(zhuǎn)成utf-8的編碼，并把文件寫入b.log 22、批量替換多個(gè)文件中的字符串

Shell代碼

sed -i "s/<原始串>/<新串>/g" `grep <原始串> -rl < 目標(biāo)文件或目錄>`

備注： -i 表示inplace edit，就地修改文件 -r 表示搜索子目錄 -l 表示輸出匹配的文件名 23、常用MySQL語(yǔ)句 //查詢mysql變量（timeout） show variables like "%timeout" //查詢緩存變量 show status like "Qcache%" //查詢進(jìn)程列表 show PROCESSLIST 24、清空memcache數(shù)據(jù) telnet 10.27.5.71 11211 flush_all quit //退出telnet 25、監(jiān)控Tomcat并啟動(dòng)

Shell代碼

#!/bin/sh

export _JAVA_SR_SIGNUM=12

export JAVA_HOME=/usr/java/jdk1.6.0_11

export CATALINA_BASE=/home/co_newest_family/tomcat

export CATALINA_HOME=/usr/local/apache-tomcat-6.0.18

export LD_LIBRARY_PATH=:/usr/local/lib/:/usr/local/apr/lib/:/usr/local/apr/lib/

export CATALINA_OPTS="-server -Xms1024m -Xmx2048m -XX:PermSize=128m -XX:MaxPermSize=128m -Dcom.sun.management.jmxremote -Dcom.sun.management.jmxremote.port=9158 -Dcom.sun.management.jmxremote.authenticate=false -Dcom.sun.management.jmxremote.ssl=false -Dfile.encoding=UTF8 -Dmeganotes.home=/home/co_newest_family"

export PATH=$JAVA_HOME/bin:$PATH:$HOME/bin

date=`date "+%H:%M:%S"`

message="$date|check_tomcat(81_co_newest_family)_shutdown_and_restart_it."

request_url="http://10.27.5.81:9091/index.jsp"

if ! wget -t1 -T2 $request_url &> /dev/null;then

#pid=`ps aux | grep "\-Dcms4.home\=\/home\/co_newest_family\/"| awk "{print $2}"`

#kill -9 $pid

ps x|grep "tomcat"|grep -v "grep"|grep -v "sh"|awk "{print $1}"|xargs kill -9

$CATALINA_HOME/bin/startup.sh

wget -t1 -T2 http://10.27.5.112:8880/send.jsp?msg=$message &> /dev/null;

echo "$date check tomcat shutdown and restart it." >> logs/check.log

else

echo "$date check tomcat ok." >> logs/check.log

fi

rm -f index.jsp*

rm -f send.jsp?msg=*

備注：定時(shí)監(jiān)控tomcat，發(fā)現(xiàn)掛掉，立刻重啟！并發(fā)送短信和郵件報(bào)告~ -t1 表示只請(qǐng)求一次 -T2 表示2秒超時(shí) 26、linux查找文件的一些方法 1) 按文件名查找 #在/opt目錄及其子目錄下查找包含文件名是以zhjedu開頭的文件 find /opt -name "zhjedu*"   2) 按時(shí)間查找 #在/opt目錄及其子目錄下查找最近1個(gè)小時(shí)修改的文件 find /opt -mtime -1 #在/opt目錄及其子目錄下查找1個(gè)小時(shí)以前修改的文件 find /opt -mtime +1 3)  按類型查找 #在/opt目錄及其子目錄下查找目錄及其子目錄 find /opt -type d #在/opt目錄及其子目錄下查找所有的普通文件 find /opt -type f 4) 按大小查找 #在/opt目錄及其子目錄下查找文件大于10M的文件 find /opt -size +10000k 27、curl命令的用法 參見(jiàn)1：http://blog.sina.com.cn/s/blog_62b832910100tyfi.html 參見(jiàn)2：http://javag.iteye.com/blog/499113 28、split切割大文件

Shell代碼

split -l 10000 log1_6.log.2012-03-21 tt.txt

備注：將log1_6.log.2012-03-21文件切割成10000行一個(gè)的以tt.txt開頭的N多個(gè)文件 -l 表示按行切割 tt.txt 表示切割后的零碎文件的前綴 29、循環(huán)讀取行 讀取文件每行并輸出 方法一：

Shell代碼

#!/bin/sh

while read line

do

echo $line

done < filename

方法二：

Shell代碼

#!/bin/sh

cat filename | while read line

do

echo $line

done

30、刪除數(shù)量比較多的文件

Shell代碼

ls | xargs -n 20 rm -rf

ls當(dāng)然是輸出所有的文件名(用空格分割) xargs就是將ls的輸出，每20個(gè)為一組(以空格為分隔符)，作為rm -rf的參數(shù) 也就是說(shuō)將所有文件名20個(gè)為一組，由rm -rf刪除，這樣就不會(huì)超過(guò)命令行的長(zhǎng)度了 31、for循環(huán)總結(jié) a. for((i=1;i<=10;i++));do echo $(expr $i \* 4);done b. 在shell中常用的是 for i in $(seq 10) c. for i in `ls` d. for i in ${arr[@]}   e. for i in $* ; do f. for File in /proc/sys/net/ipv4/conf/*/accept_redirects; do g. for i in f1 f2 f3 ;do h. for i in *.txt i. for i in $(ls *.txt)    for in語(yǔ)句與` `和$( )合用，利用` `或$( )的將多行合為一行的缺陷，實(shí)際是合為一個(gè)字符串?dāng)?shù)組    for num in $(seq 1 100) j. LIST="rootfs usr data data2"    for d in $LIST; do    用for in語(yǔ)句自動(dòng)對(duì)字符串按空格遍歷的特性，對(duì)多個(gè)目錄遍歷 k. for i in {1..10} l. for i in stringchar {1..10} m. awk "BEGIN{for(i=1; i<=10; i++) print i}" 注意：AWK中的for循環(huán)寫法和C語(yǔ)言一樣的 參考：http://hi.baidu.com/plp_cm/blog/item/d828d1881b05e2faf11f3607.html 32、格式轉(zhuǎn)換 dos2unix, unix2dos 用來(lái)實(shí)現(xiàn) DOS <=> UNIX text file 轉(zhuǎn)換

Shell代碼

unix2dos target.$date.txt

dos2unix target.$date.txt

33、根據(jù)起止日期打印期間的日期

Shell代碼

#!/bin/sh

#riqizizeng

datebeg=$1

dateend=$2

#read datebeg

#read dateend

beg_s=`date -d "$datebeg" +%s`

end_s=`date -d "$dateend" +%s`

while [ "$beg_s" -le "$end_s" ]

do

day=`date -d @$beg_s +"%Y-%m-%d"`;//本次循環(huán)的日期

beg_s=$((beg_s+86400))

done

34、用awk來(lái)對(duì)比兩個(gè)文件 要求：輸出a.txt中包含b.txt的行 命令：

Shell代碼

awk "NR==FNR{a[substr($2,3)]=$0;next}{if($0 in a)print a[$0]}" a.txt b.txt > c.txt

備注：awk參數(shù)用法：http://bbs.chinaunix.net/thread-691456-1-1.htmlhttp://bbs.chinaunix.net/thread-1797847-1-1.html substr($2,3)：表示截取a.txt第二列從第三個(gè)字符開始的所有字符。 if($0 in a)：如果b.txt的一行跟a.txt第二列截取字符的相等。 a.txt（數(shù)據(jù)源1） ---------------- 12 x=abc 14 x=ccc 15 x=acd b.txt（數(shù)據(jù)源2） ---------------- abc ccc efg c.txt（結(jié)果） ---------------- 12 x=abc 14 x=ccc 35、在root用戶下查看端口被哪個(gè)用戶占用

Shell代碼

lsof -i:8091

36、查看一個(gè)關(guān)鍵字的前后N行

Shell代碼

cat tomcat/debuglog/debug.log.2012-07-05-21  |grep -B 5 -A 25 java.net.SocketTimeoutException

37、根據(jù)修改時(shí)間判定文件數(shù)目（適用于大數(shù)目文件夾哦）

Shell代碼

ll |awk "{print $6$7$8}" |grep Aug212012 |wc -l

備注：$6表示月份，$7表示日期（最近幾天只顯示時(shí)間），$8表示年份。 如上命令表示：2012-08-21日產(chǎn)生的文件數(shù)目