分类目录归档：shell脚本

shell中的大括号，截取字符串

发表评论

# load LVS IPVS modules
if [ -d /lib/modules/$unamer/kernel/net/ipv4/ipvs ]; then
for module in /lib/modules/$unamer/kernel/net/ipv4/ipvs/* ; do
module=${module##*/}
module=${module%.ko}
modprobe $module >/dev/null 2>&1
done
fi
就把/lib/modules/2.6.21-1.3194.fc7/kernel/net/ipv4/ipvs/下的所有模块都自动加载了。其中：
if语句检查ipvs模块的目录是否存在
for循环遍历该目录下面的所有文件
module=${module##*/} ：其中##表示从前面删除字符，*/表示删除到最后一个/，如果一个#就表示只删除到第一个/。如果变量后面接##，表示在##后面的字符串取最长的(一直到最后面)，如果接#，表示取最小的一段。
module=${module%.ko}：表示从后面删除.ko。如果变量后面接%%，表示在%%后面的字符串取最长的(一直到最前面)，如果接%，表示取最小的一段。
这样多module的两次修改就得到了模块名，就是文件名不带路径和.ko后缀。

备注：
1、${}是用来进行变量替换的
2、shell十三问中的${file##*/}的说明
為了完整起見，我這裡再用一些例子加以說明 ${ } 的一些特異功能：
假設我們定義了一個變量為：
file=/dir1/dir2/dir3/my.file.txt
我們可以用 ${ } 分別替換獲得不同的值：
${file#*/}：拿掉第一條 / 及其左邊的字串：dir1/dir2/dir3/my.file.txt
${file##*/}：拿掉最後一條 / 及其左邊的字串：my.file.txt
${file#*.}：拿掉第一個 . 及其左邊的字串：file.txt
${file##*.}：拿掉最後一個 . 及其左邊的字串：txt
${file%/*}：拿掉最後條 / 及其右邊的字串：/dir1/dir2/dir3
${file%%/*}：拿掉第一條 / 及其右邊的字串：(空值)
${file%.*}：拿掉最後一個 . 及其右邊的字串：/dir1/dir2/dir3/my.file
${file%%.*}：拿掉第一個 . 及其右邊的字串：/dir1/dir2/dir3/my
記憶的方法為：

# 是去掉左邊(在鑑盤上 # 在 $ 之左邊)
% 是去掉右邊(在鑑盤上 % 在 $ 之右邊)
單一符號是最小匹配﹔兩個符號是最大匹配。

则module=ip_vs.ko,一个#表示从左边删除字符，*/表示删除到最后一个，##*/

sort+uniq计算重复行

发表评论

1.对于重复行的不同处理：

sort和uniq都可以去除重复行，
sort是去除所有重复行
uniq是去除连续的重复行，中间不能隔和其他信息

2.uniq中的-c选项：打印每一重复行出现的次数，导致我们统计的时候会直接使用这一命令，而不用编写或者使用复杂的命令。
但是它对重复行的定义是连续的，所有我们就用到的sort来排序，使相同的行连续起来。再利用uniq统计数量。

这就是著名的”sort | uniq -c”统计数量了。你也可以”sort | uniq -c | sort -nr”来排序。

当然sort和uniq还有许多不同的选项，选择在不同的时候，使用合适的命令才是我们最后的选择。

bash中脚本控制输出中的颜色设置

发表评论

bash中脚本控制输出中的颜色设置

ANSI控制码的说明
例如:
echo -ne “\33[32m” 可以将字符的显示颜色改为绿色，这个我常用来脚本执行结束之后来打印OK字样。
echo -ne “\33[3;1H” 可以将光标移到第3行第1列处
具体的摘抄一些如下：
\33[0m 关闭所有属性
\33[1m 设置高亮度
\33[4m 下划线
\33[5m 闪烁
\33[7m 反显
\33[8m 消隐
\33[30m — \33[37m 设置前景色
\33[40m — \33[47m 设置背景色
\33[nA 光标上移n行
\33[nB 光标下移n行
\33[nC 光标右移n行
\33[nD 光标左移n行
\33[y;xH设置光标位置
\33[2J 清屏
\33[K 清除从光标到行尾的内容
\33[s 保存光标位置
\33[u 恢复光标位置
\33[?25l 隐藏光标
\33[?25h 显示光标
所有的转移字符表:
\a ASCII 响铃字符（也可以键入 \007）
\d “Wed Sep 06” 格式的日期
\e ASCII 转义字符（也可以键入 \033）
\h 主机名的第一部分（如 “mybox”）
\H 主机的全称（如 “mybox.mydomain.com”）
\j 在此 shell 中通过按 ^Z 挂起的进程数
\l 此 shell 的终端设备名（如 “ttyp4″）
\n 换行符
\r 回车符
\s shell 的名称（如 “bash”）
\t 24 小时制时间（如 “23:01:01″）
\T 12 小时制时间（如 “11:01:01″）
\@ 带有 am/pm 的 12 小时制时间
\u 用户名
\v bash 的版本（如 2.04）
\V Bash 版本（包括补丁级别） ?/td>
\w 当前工作目录（如 “/home/drobbins”）
\W 当前工作目录的“基名 (basename)”（如 “drobbins”）
\! 当前命令在历史缓冲区中的位置
\# 命令编号（只要您键入内容，它就会在每次提示时累加）
\$ 如果您不是超级用户 (root)，则插入一个 “$”；如果您是超级用户，则显示一个 “#”
\xxx 插入一个用三位数 xxx（用零代替未使用的数字，如 “\007″）表示的 ASCII 字符
\\ 反斜杠
\[ 这个序列应该出现在不移动光标的字符序列（如颜色转义序列）之前。它使 bash 能够正确计算自动换行。
\] 这个序列应该出现在非打印字符序列之后。

这样，您已经知道了 bash 中用反斜杠转义的全部专用序列。请稍微演练一下这些序列，以对它们的工作方式获得一些感性认识。在您做了一些测试之后，下面开始添加颜色。

${}和$()的区别

发表评论

Chainunix的网中人的shell十三问中的内容：

shell 十三問?

8) $(( )) 與 $( ) 還有${ } 差在哪？

我們上一章介紹了 ( ) 與 { } 的不同，這次讓我們擴展一下，看看更多的變化：$( ) 與 ${ } 又是啥玩意兒呢？

在 bash shell 中，$( ) 與 ` ` (反引號) 都是用來做命令替換用(command substitution)的。
所謂的命令替換與我們第五章學過的變量替換差不多，都是用來重組命令行：
* 完成引號裡的命令行，然後將其結果替換出來，再重組命令行。
例如：

  1. $ echo the last sunday is $(date -d “last sunday” +%Y-%m-%d)

复制代码

如此便可方便得到上一星期天的日期了… ^_^

在操作上，用 $( ) 或 ` ` 都無所謂，只是我”個人”比較喜歡用 $( ) ，理由是：

1,  ` ` 很容易與 ‘ ‘ ( 單引號)搞混亂，尤其對初學者來說。
有時在一些奇怪的字形顯示中，兩種符號是一模一樣的(直豎兩點)。
當然了，有經驗的朋友還是一眼就能分辯兩者。只是，若能更好的避免混亂，又何樂不為呢？ ^_^

2, 在多層次的復合替換中，` ` 須要額外的跳脫( \` )處理，而 $( ) 則比較直觀。例如：
這是錯的：

  1. command1 `command2 `command3` `

复制代码

原本的意圖是要在 command2 `command3` 先將 command3 提換出來給 command 2 處理，
然後再將結果傳給 command1 `command2 …` 來處理。
然而，真正的結果在命令行中卻是分成了 `command2 ` 與 “ 兩段。
正確的輸入應該如下：

  1. command1 `command2 \`command3\` `

复制代码

要不然，換成 $( ) 就沒問題了：

  1. command1 $(command2 $(command3))

复制代码

只要你喜歡，做多少層的替換都沒問題啦~~~  ^_^

不過，$( ) 並不是沒有斃端的…
首先，` ` 基本上可用在全部的 unix shell 中使用，若寫成 shell script ，其移植性比較高。
而 $( ) 並不見的每一種 shell 都能使用，我只能跟你說，若你用 bash2 的話，肯定沒問題…  ^_^

接下來，再讓我們看 ${ } 吧… 它其實就是用來作變量替換用的啦。
一般情況下，$var 與 ${var} 並沒有啥不一樣。
但是用 ${ } 會比較精確的界定變量名稱的範圍，比方說：

  1. $ A=B
  2. $ echo $AB

复制代码

原本是打算先將 $A 的結果替換出來，然後再補一個 B 字母於其後，
但在命令行上，真正的結果卻是只會提換變量名稱為 AB 的值出來…
若使用 ${ } 就沒問題了：

  1. $ echo ${A}B
  2. BB

复制代码

不過，假如你只看到 ${ } 只能用來界定變量名稱的話，那你就實在太小看 bash 了﹗
有興趣的話，你可先參考一下 cu 本版的精華文章：
http://www.chinaunix.net/forum/viewtopic.php?t=201843

為了完整起見，我這裡再用一些例子加以說明 ${ } 的一些特異功能：
假設我們定義了一個變量為：
file=/dir1/dir2/dir3/my.file.txt
我們可以用 ${ } 分別替換獲得不同的值：
${file#*/}：拿掉第一條 / 及其左邊的字串：dir1/dir2/dir3/my.file.txt
${file##*/}：拿掉最後一條 / 及其左邊的字串：my.file.txt
${file#*.}：拿掉第一個 .  及其左邊的字串：file.txt
${file##*.}：拿掉最後一個 .  及其左邊的字串：txt
${file%/*}：拿掉最後條 / 及其右邊的字串：/dir1/dir2/dir3
${file%%/*}：拿掉第一條 / 及其右邊的字串：(空值)
${file%.*}：拿掉最後一個 .  及其右邊的字串：/dir1/dir2/dir3/my.file
${file%%.*}：拿掉第一個 .  及其右邊的字串：/dir1/dir2/dir3/my
記憶的方法為：

    # 是去掉左邊(在鑑盤上 # 在 $ 之左邊)
    % 是去掉右邊(在鑑盤上 % 在 $ 之右邊)
    單一符號是最小匹配﹔兩個符號是最大匹配。

${file:0:5}：提取最左邊的 5 個字節：/dir1
${file:5:5}：提取第 5 個字節右邊的連續 5 個字節：/dir2

我們也可以對變量值裡的字串作替換：
${file/dir/path}：將第一個 dir 提換為 path：/path1/dir2/dir3/my.file.txt
${file//dir/path}：將全部 dir 提換為 path：/path1/path2/path3/my.file.txt

利用 ${ } 還可針對不同的變數狀態賦值(沒設定、空值、非空值)：
${file-my.file.txt} ：假如 $file 沒有設定，則使用 my.file.txt 作傳回值。(空值及非空值時不作處理)
${file:-my.file.txt} ：假如 $file 沒有設定或為空值，則使用 my.file.txt 作傳回值。 (非空值時不作處理)
${file+my.file.txt} ：假如 $file 設為空值或非空值，均使用 my.file.txt 作傳回值。(沒設定時不作處理)
${file:+my.file.txt} ：若 $file 為非空值，則使用 my.file.txt 作傳回值。 (沒設定及空值時不作處理)
${file=my.file.txt} ：若 $file 沒設定，則使用 my.file.txt 作傳回值，同時將 $file 賦值為 my.file.txt 。 (空值及非空值時不作處理)
${file:=my.file.txt} ：若 $file 沒設定或為空值，則使用 my.file.txt 作傳回值，同時將 $file 賦值為 my.file.txt 。 (非空值時不作處理)
${file?my.file.txt} ：若 $file 沒設定，則將 my.file.txt 輸出至 STDERR。 (空值及非空值時不作處理)
${file:?my.file.txt} ：若 $file 沒設定或為空值，則將 my.file.txt 輸出至 STDERR。 (非空值時不作處理)

tips:
以上的理解在於, 你一定要分清楚 unset 與 null 及 non-null 這三種賦值狀態.
一般而言, : 與 null 有關, 若不帶 : 的話, null 不受影響, 若帶 : 則連 null 也受影響.

還有哦，${#var} 可計算出變量值的長度：
${#file} 可得到 27 ，因為 /dir1/dir2/dir3/my.file.txt 剛好是 27 個字節…

接下來，再為大家介稍一下 bash 的組數(array)處理方法。
一般而言，A=”a b c def” 這樣的變量只是將 $A 替換為一個單一的字串，
但是改為 A=(a b c def) ，則是將 $A 定義為組數…
bash 的組數替換方法可參考如下方法：

  1. ${A[@]} 或 ${A[*]}

复制代码

可得到 a b c def (全部組數)

  1. ${A[0]}

复制代码

可得到 a (第一個組數)，${A[1]} 則為第二個組數…

  1. ${#A[@]} 或 ${#A[*]}  

复制代码

可得到 4 (全部組數數量)

  1. ${#A[0]}

复制代码

可得到 1 (即第一個組數(a)的長度)，${#A[3]} 可得到 3 (第四個組數(def)的長度)

  1. A[3]=xyz  

复制代码

則是將第四個組數重新定義為 xyz …

諸如此類的….
能夠善用 bash 的 $( ) 與 ${ } 可大大提高及簡化 shell 在變量上的處理能力哦~~~  ^_^

好了，最後為大家介紹 $(( )) 的用途吧：它是用來作整數運算的。
在 bash 中，$(( )) 的整數運算符號大致有這些：
+ – * / ：分別為 “加、減、乘、除”。
% ：餘數運算
& | ^ !：分別為 “AND、OR、XOR、NOT” 運算。

例：

  1. $ a=5; b=7; c=2
  2. $ echo $(( a+b*c ))
  3. 19
  4. $ echo $(( (a+b)/c ))
  5. 6
  6. $ echo $(( (a*b)%c))
  7. 1

复制代码

在 $(( )) 中的變量名稱，可於其前面加 $ 符號來替換，也可以不用，如：
$(( $a + $b * $c)) 也可得到 19 的結果

此外，$(( )) 還可作不同進位(如二進位、八進位、十六進位)作運算呢，只是，輸出結果皆為十進位而已：
echo $((16#2a)) 結果為 42 (16進位轉十進位)
以一個實用的例子來看看吧：
假如當前的  umask 是 022 ，那麼新建文件的權限即為：

  1. $ umask 022
  2. $ echo “obase=8;$(( 8#666 & (8#777 ^ 8#$(umask)) ))” | bc
  3. 644

复制代码

事實上，單純用 (( )) 也可重定義變量值，或作 testing：
a=5; ((a++)) 可將 $a 重定義為 6
a=5; ((a–)) 則為 a=4
a=5; b=7; ((a < b)) 會得到  0 (true) 的返回值。
常見的用於 (( )) 的測試符號有如下這些：

    <：小於
    >：大於
    <=：小於或等於
    >=：大於或等於
    ==：等於
    !=：不等於

不過，使用 (( )) 作整數測試時，請不要跟 [ ] 的整數測試搞混亂了。(更多的測試我將於第十章為大家介紹)

怎樣？好玩吧..  ^_^  okay，這次暫時說這麼多…
上面的介紹，並沒有詳列每一種可用的狀態，更多的，就請讀者參考手冊文件囉…

发现iptables的启动脚本有用到，如下：
IPV=${IPTABLES%tables} # ip for ipv4 | ip6 for ipv6

touch 更改文件时间，创建时间，修改时间等。

发表评论

[root@server1 /]# stat /bin/bash

File: `/bin/bash’

Size: 722684          Blocks: 1432       IO Block: 4096   regular file

Device: 802h/2050d      Inode: 3524863     Links: 1

Access: (0755/-rwxr-xr-x)  Uid: (    0/    root)   Gid: (    0/    root)

Access: 2008-08-18 13:15:01.000000000 +0800

Modify: 2006-07-12 15:11:53.000000000 +0800

Change: 2008-05-14 12:01:18.000000000 +0800

－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－

Here are the definitions of the different UNIX time information on a file with how they are typically referred to in  man pages and the option to list the particular time with the  ls  command.

Access Time | atime | -ul
              This is the time that the file was last accessed, read or written to.
              访问文件

Modify Time | mtime | -l
      This is the time that the inode information (permissions, name, etc., the metadata, as it were) was last modified
              改文件内容

Change Time | ctime | -cl
              This is the last time the actual contents of the file were last modified.
              改文件名，改文件内容，改文件权限，所有者，所属组

shell的for循环

发表评论

关于shell中的for循环用法很多，一直想总结一下，今天网上看到上一篇关于for循环用法的总结，感觉很全面，所以就转过来研究研究，嘿嘿…

1、 for((i=1;i<=10;i++));do echo $(expr $i \* 4);done
2、在shell中常用的是 for i in $(seq 10)
3、for i in `ls`

4、for i in ${arr[@]}  
5、for i in $* ; do
6、for File in /proc/sys/net/ipv4/conf/*/accept_redirects; do
7、for i in f1 f2 f3 ;do
8、for i in *.txt
9、for i in $(ls *.txt)
for in语句与` `和$( )合用，利用` `或$( )的将多行合为一行的缺陷，实际是合为一个字符串数组
10、LIST=”rootfs usr data data2″
for d in $LIST; do
    用for in语句自动对字符串按空格遍历的特性，对多个目录遍历
11、for i in {1..10}
12、for i in stringchar {1..10}
13、awk ‘BEGIN{for(i=1; i<=10; i++) print i}’

注意：AWK中的for循环写法和C语言一样的

wget 脚本常用选项

发表评论

wget -c url    支持断点续传
wget -c http://www.hardwork.cn/1.rar

wget -P 把文件存储在哪个位置
wget -P /usr/local/src https://www.hardwork.cn/1.rar

wget –http-user=name –http-password=pw url
wget –http-user=software –http-password=123456 https://www.hardwork.cn/1.rar
如果页面有验证，使用http-user和http-password做验证

wget 代理服务器设置，在root目录下建立.wgetrc文件，里面写入代理服务器地址即可

例如：.wgetrc
http-proxy = 70.20.196.10:8080
http-proxy = 144.1140.162.6:80
http-proxy = 206.220.88.36:80

shell脚本从文件中按行读取数据，并且赋值到数组中的几种方法。

3条回复

从ip.txt里读取IP.然后把IP地址赋值到一个数组里.
IP文件如下：
Address:  220.181.26.163
Address:  220.181.26.174
Address:  220.181.26.175
Address:  220.181.26.176
Address:  220.181.19.228
Address:  220.181.19.229
Address:  220.181.26.161
Address:  220.181.26.162

方法一：
for x in ` awk ‘{print $2}’ ip.txt `
{
echo $x
}
方法二：
ARRAY=($(awk ‘{print $2}’ ip.txt))
方法三：
n=0;while read a b;do array[$n]=$b;((n++));done<ip.txt

方法四：
n=1
while ((n<=$(cat ip.txt|wc -l)))
do
    ipaddr[$n]=$(cat ip.txt|sed -n “${n}p”|awk ‘{print $2}’)
    ((n+=1))
done
n=`expr $n – 1`

dos格式文件转换为unix文件格式

发表评论

dos格式文件传输到unix系统时,会在每行的结尾多一个^M,当然也有可能看不到,但是在vi的时候,会在下面显示此文件的格式,比如 “dos.txt” [dos] 120L, 2532C 字样,表示是一个[dos]格式文件,如果是MAC系统的,会显示[MAC],因为文件格式的原因有时会导致我们的unix程序,或者shell程序出现错误,那么需要把这些dos文件格式转换成unix格式,方法是 vi dos.txt

:set fileformat=unix

:w 　　这样文件就转换成unix格式文件了, 一般在windows机器上编写好了文件传到unix下就可能会出现这样的情况.　　用命令:set ff?　　可以看到dos或unix的字样.

　　用:set ff=unix把它强制为unix格式，也可以用sed 这样的工具来做:　　sed ‘s/^M//’ filename > tmp_filename　　其中^M是同时Ctrl+V+M按出来的，表示回车。

其它“怪招”：

1. 使用vi

vi dos_file.txt

:%s/^M//g

其中^M 必须是同时按 Ctrl+V+M ，表示回车。不是直接输入 ^M ，那没有用的，　:-) 。2. 使用tr

命令：tr -d “\015” dos_file.txt3. 使用perlcat dos_file.txt | perl -pe ‘~s/\r//g’ > dos_file.txt【VIM】DOS、Mac 和 Unix 文件http://vimcdoc.sourceforge.net/doc/usr_23.html

很久以前，老式的电传打字机使用两个字符来另起新行。一个字符把滑动架移回首位 (称

为回车，<CR>)，另一个字符把纸上移一行 (称为换行，<LF>)。

当计算机问世以后，存储器曾经非常昂贵。有些人就认定没必要用两个字符来表示行

尾。UNIX 开发者决定他们可以用 <Line Feed> 一个字符来表示行尾。Apple 开发者规定

了用 <CR>。开发 MS-DOS (以及微软视窗) 的那些家伙则决定沿用老式的 <CR><LF>。

那意味着，如果你试图把一个文件从一种系统移到另一种系统，那么你就有换行符方

面的麻烦。Vim 编辑器自动识别不同文件格式，并且不劳你操心就把事情给办妥了。

选项 ‘fileformats’ 包含各种各样的格式，Vim 会在编辑一个新文件之初尝试该选项

定义的各种格式。例如，下面这个命令告诉 Vim 先尝试用 UNIX 格式，其次，尝试

MS-DOS 格式: :set fileformats=unix,dos编辑一个文件时，你将注意到 Vim 给出的信息消息报中包括文件所用的格式。如果你编

辑的是本地格式文件 (你编辑的文件格式和所用系统一致)，你就不会看到任何格式名。

因此在 Unix 系统上编辑一个 Unix 格式文件不会产生任何关于格式的信息。但你若编辑

一个 dos 文件，Vim 将这样通知你: “/tmp/test” [dos] 3L，71C 如果是 Mac 文件，你会看到 “[mac]”。

探测到的文件格式会被存入 ‘fileformat’ 选项。执行下面这个命令可以显示你当前

使用的文件格式: :set fileformat?Vim 能使用的三种格式如下: unix <LF>

dos <CR><LF>

mac <CR>

使 用 MAC 格 式在 Unix 上，<LF> 用于分行。但 <CR> 字符混在文本行中间也非罕见。这种情况碰巧经

常发生在 Vi (和 Vim) 脚本内。

在采用 <CR> 作为换行符的 Macintosh 上，<LF> 字符也有可能混在文本行中间。

结果，很难 100% 肯定一个同时包含 <CR> 和 <LF> 的文件究竟是 Mac 还是 Unix 格

式。所以，Vim 假设你一般不会在 Unix 上编辑一个 Mac 文件，所以干脆对这种文件格

式不作检查。果真要检查此种格式，就把 “mac” 加入 ‘fileformats’: :set fileformats+=mac然后 Vim 就会猜测文件格式。要当心， Vim 可能会猜错的。

强 制 格 式如果你用往日美好的 Vi 来尝试编辑一个采用 MS-DOS 格式的文件，你将会发现每一行的

末尾有个 ^M 字符。(^M 就是 <CR>)。而 Vim 的自动探测功能就避免了这个问题。莫非

你确实要按那个样子来编辑这个文件吗？那么你需要强制 Vim 忽略文件格式而使用你指

定的格式: :edit ++ff=unix file.txt字符串 “++” 告诉 Vim 后面跟的是选项名，以取代其默认值。但仅作用于这一个命令。

“++ff” 用于 ‘fileformat’ 选项。你也可以用 “++ff=mac” 或 “++ff=dos”。

这样用法并非适用于任意选项，目前 Vim 仅仅实现了 “++ff” 和 “++enc”。用全称

“++fileformat” 和 “++encoding” 也行。

转 换你可以用 ‘fileformat’ 选项把文件从一种格式转换为另一种。例如，假定你有个名为

README.TXT 的 MS-DOS 文件，你要把它转换成 UNIX 格式。首先编辑这个采用 MS-DOS

格式的文件:

vim README.TXTVim 将识别出那是一个 dos 格式文件。现在把这个文件的格式改为 UNIX: :set fileformat=unix

:write这个文件就以 Unix 格式存盘了。