大数据教程(2.7):Linux脚本shell编程入门

老子叫甜甜 提交于 2019-12-10 16:36:25

    工作中,我们玩过服务器的人都知道,在linux系统中程序的启动一般都是通过运行一个Shell脚本来实现的;Shell脚本不光在启动程序方面有所作为,在大数据、自动化脚本等方面都是我们的必备知识之一。Shell脚本到底是一种什么样的语言?能干啥呢?接下来博主将为大家详细讲述,并带领大家深入到linux编程中一探究竟。

一、Shell概念

    Shell是用户与内核进行交互操作的一种接口,目前最流行的Shell称为bash Shell;Shell也是一门编程语言<解释型的编程语言>,即Shell脚本;一个系统可以存在多个Shell,可以通过cat /etc/shells命令查看系统中安装的shell,不同的shell可能支持的命令语法是不相同的。

二、shell入门详解

(1)shell脚本的执行:

        第一种:输入脚本的绝对路径或相对路径(首先要赋予+x权限)执行    

                    /root/helloWorld.sh

                    . /helloWorld.sh

        

        第二种:bash或sh +脚本执行

                    sh /root/helloWorld.sh   

                    sh helloWorld.sh

        第三种:在脚本的路径前再加". ",表示在当前的shell进程中执行(pstree可以查看进程之间的派生关系)

                    . /root/helloWorld.sh     . ./helloWorld.sh

        区别:第一种和第二种会新开一个bash,不同bash中的变量无法共享。

        扩展知识:pstree命令以树状图的方式展现进程之间的派生关系,显示效果比较直观。

        语法:pstree    (选项)

        选项:

                    -a:显示每个程序的完整指令,包含路径,参数或是常驻服务的标示;
                    -c:不使用精简标示法;
                    -G:使用VT100终端机的列绘图字符;
                    -h:列出树状图时,特别标明现在执行的程序;
                    -H<程序识别码>:此参数的效果和指定"-h"参数类似,但特别标明指定的程序;
                    -l:采用长列格式显示树状图;
                    -n:用程序识别码排序。预设是以程序名称来排序;
                    -p:显示程序识别码;
                    -u:显示用户名称;
                    -U:使用UTF-8列绘图字符;
                    -V:显示版本信息。

        实例:显示当前所有进程的进程号和进程id

                     pstree -p

                     显示所有进程的所有详细信息,遇到相同的进程名可以压缩显示。

                     pstree  -a

          效果图  

(2)Shell中的变量

         Linux Shell中的变量分为“系统变量”和“用户自定义变量”,可以通过set命令查看所有系统变量

系统变量:$HOME、$PWD、$SHELL、$USER等等

显示当前shell中所有变量  :    set

(3)定义变量

        STR="hello world"

        A=9

        unset A 撤销变量

        A readonly B=2 声明静态的变量 B=2 ,不能 unset

        export 变量名 可把变量提升为全局环境变量,可供其他shell程序使用

(4)将命令的返回值赋给变量

        A=`ls -la` 反引号,运行里面的命令,并把结果返回给变量A

        A=$(ls -la) 等价于反引号

(5)Shell中的特殊变量

        $? 表示上一个命令退出的状态
        $$ 表示当前进程编号
        $0 表示当前脚本名称
        $n 表示n位置的输入参数(n代表数字,n>=1)
        $#     表示参数的个数,常用于循环
        $*和$@ 都表示参数列表 

(6)$*与$@区别

        $* 和 $@ 都表示传递给函数或脚本的所有参数,不被双引号" "包含时,都以$1  $2  … $n 的形式输出所有参数 

        当它们被双引号" "包含时,"$*" 会将所有的参数作为一个整体,以"$1 $2 … $n"的形式输出所有参数;"$@" 会将各个参数分开,以"$1" "$2" … "$n" 的形式输出所有参数

(7)运算符

         格式 :expr m + n 或$((m+n)) 注意expr运算符间要有空格

         例如计算(2 +3 )×4 的值

         分步计算

             S=`expr 2 + 3`   

             expr $S \* 4

         一步完成计算

             expr `expr 2 + 3 ` \* 4     

             echo `expr \`expr 2 + 3\` \* 4`     

             或     $(((2+3)*4))

(8)for循环

            第一种: for N in 1 2 3

                          do   

                          echo $N

                          done

                  或 :for N in 1 2 3;

                          do

                          echo $N;

                          done

                  或 :for N in {1..3};

                         do

                         echo $N;

                         done

            第二种

                        for ((i = 0; i <= 5; i++))
                        do
                        echo "welcome $i times"
                        done
                    或
                        for ((i = 0; i <= 5; i++));   do  echo "welcome $i times";

                        done

(9)while循环

           第一种

                       while expression

                       do command

                        …

                       done

            第二种

                        i=1

                        while ((i<=3))

                        do  

                        echo $i  

                        let i++

                        done

(10)case语句

                  格式 case $1 in

                          start)     

                          echo "starting"     

                          ;;

                          stop)   

                          echo "stoping"     

                            ;;

                          *)   

                          echo "Usage: {start|stop} “

                          esac

(11)read命令

                read -p(提示语句)-n(字符个数) -t(等待时间)     

                read -p "please input your name: " NAME

                使用示例:   

(12)if判断

    语法 if condition

                then statements

            [elif condition

                then statements. ..]

            [else

                statements ]

             fi

        if例子

            #!/bin/bash
            read -p "please input your name:" NAME
            #printf '%s\n' $NAME
            if [ $NAME = root ]
            then
                echo "hello ${NAME},  welcome !"
            elif [ $NAME = itcast ]
                then
                        echo "hello ${NAME},  welcome !"
            else
                echo "SB, get out here !"
            fi

(13)判断语句

        [ condition ] (注意condition前后要有空格)

        #非空返回true,可使用$?验证(0为true,>1为false)

        [ itcast ]

        #空返回false

         [  ]

         [ condition ] && echo OK || echo notok     条件满足,执行后面的语句           

(14)常用判断条件

    = 字符串比较
    -lt 小于
    -le 小于等于 
    -eq 等于
    -gt 大于
    -ge 大于等于
    -ne 不等于

    -r 有读的权限
    -w 有写的权限
    -x 有执行的权限
    -f 文件存在并且是一个常规的文件
    -s 文件存在且不为空
    -d 文件存在并是一个目录
    -b文件存在并且是一个块设备
    -L 文件存在并且是一个链接

(15)Shell自定义函数

注意
    1.必须在调用函数地方之前,先声明函数,shell脚本是逐行运行。不会像其它语言一样先预编译
    2.函数返回值,只能通过$? 系统变量获得,可以显示加:return 返回,如果不加,将以最后一条命令运行结果,作为返回值。 return后跟数值n(0-255)

脚本调试

    sh -vx helloWorld.sh
    或者在脚本中增加set -x
(16)sed命令

sed全称是:Stream EDitor即流编辑器,是一个很好的文本处理工具,本身是一个管道命令,处理时,把当前处理的行存储在临时缓冲区中,接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。接着处理下一行。它是以行为单位进行处理,可以将数据行进行替换、删除、新增、选取等特定工作。

sed选项

    -n :使用安静(silent)模式。在一般 sed 的用法中,所有来自 STDIN 的数据一般都会被列出到终端上。但如果加 上 n 参数后,则只有经过sed 特殊处理的那一行(或者动作)才会被列出来。
    -e :直接在命令列模式上进行 sed 的动作编辑;
    -i :直接修改读取的文件内容,而不是输出到终端。

sed function

    a :新增, a 的后面可以接字串,而这些字串会在新的一行出现(目前的下一行)
    d :删除,因为是删除啊,所以 d 后面通常不接任何内容
    i :插入, i 的后面可以接字串,而这些字串会在新的一行出现(目前的上一行)
    p :列印,亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行
    s :取代,可以直接进行取代的工作!通常这个 s 的动作可以搭配正规表示法!例如 1,20s/old/new/g

(17)awk命令

    AWK是一种优良的文本处理工具。其名称得自于它的创始人 Alfred Aho 、Peter Weinberger 和 Brian Kernighan 姓氏的首个字母,AWK 提供了极其强大的功能:可以进行样式装入、流控制、数学运算符、进程控制语句甚至于内置的变量和函数。它具备了一个完整的语言所应具有的几乎所有精美特性。实际上 AWK 的确拥有自己的语言:AWK 程序设计语言, 三位创建者已将它正式定义为“样式扫描和处理语言”。它允许您创建简短的程序,这些程序读取输入文件、为数据排序、处理数据、对输入执行计算以及生成报表,还有无数其他的功能。

    awk命令格式:awk 'pattern1 {action1} pattern2 {action2} ...' filename

 

    最后:以上是linux中shell编程入门的全部内容;如果你对这块知识感兴趣,请持续关注博主文章,同时欢迎同博主交流。

标签
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!