美文网首页Linux赵
Day5-命令查找、文件内容处理命令

Day5-命令查找、文件内容处理命令

作者: Gq赵 | 来源:发表于2019-07-30 19:59 被阅读3次

    一、命令查找

    which ls  #查找ls命令的绝对路径

    当我们想要查看命令的绝对路径    #which command  查询绝对路径

    whereis ls  //查找命令的路径,帮助手册

    -b  不显示帮助信息,仅显示所在绝对路径

    whereis  -b  ls    //仅显示命令所在的路径

    对于内核相关的一些命令,使用which whereis是无法查询到,需要使 用type命令查询 # type -a ls        #查看命令的绝对路径(包括别名)

    二、联网下载文件(wget、curl),文件上传与下载(rz、sz)

    wget

    1.虚拟机系统默认没有wget命令,需要进行安装命令  yum  installwget  -y 

    2.找到需要下载的资源  复制资源的连接地址

    3.在linux上使用wget命令进行下载(默认下载到当前目录)

    wget http://fj.xuliangwei.com/public/weixin.py

    4.使用wget下载资源时,指定保存的位置,并重新命名  wget -O /opt/tt.png http://fj.xuliangwei.com/public/ks.jpeg

    5.下载资源时,如果不想重新命名只想修改保存的路径,请带上原有的名称 [root@oldboyedu ~]# wget -O /opt/ks.jpeg http://fj.xuliangwei.com/public/ks.jpeg


    curl 浏览网络上的资源

    1.在线浏览网站资源内容(源代码) curl http://fj.xuliangwei.com/public/weixin.py

    2.使用curl将内容保存至本地,并重命名(如果没有明确指定路径,则表示 当前目录)

    curl -o wei.txt http://fj.xuliangwei.com/public/weixin.py

    3.将资源保存至指定的路径 

    curl -o /opt/weixin.py http://fj.xuliangwei.com/public/weixin.py

    #练习: 使用两种方式下载如下的两个文件 #1.wget保存至本地 /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo [root@oldboyedu ~]# wget -O /etc/yum.repos.d/CentOSBase.repo http://mirrors.aliyun.com/repo/Centos-7.repo

    #2.curl保存至本地 /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo [root@oldboyedu ~]# curl -o /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo

    #3.最后执行一条命令检查  yum makecache


    rzsz上传下载文件

    rz  #只能上传文件,不支持上传文件夹,不支持大于4个G上传,也不支持断点续传 

    # sz /path/file #只能下载文件 (任意单个文件),不支持下载文件夹


    sort排序

    在有些情况下,需要对应一个无序的文本文件进行数据的排序,这时 就需要使用sort进行排序了。

    sort   选项     文件

    -r  #倒序 

    -n  #按数字排序

    -t  #指定分隔符

    说明:  对p.txt的ip地址进行排序。#   -t是定义字符 #  -k3.1,3.1 第三列的第1项 

    # -k4.1,4.3 第四列的第1-3项  # -n是按数字排序 

    -k  #指定第几列, 指定几列几字符(指定1.1  3.1,3.3)    第一列的第一项     第三项的第1-3项

    #首先创建一个文件,写入一写无序的内容 

    cat >> file.txt <<EOF

    b:3 

    c:2 

    a:4 

    e:5 

    d: 1

    f:11 

    EOF

    #2.使用sort下面对输出的内容进行排序 sort file.txt 

    a:4

     b:3

     c:2

     d:1

     e:5

     f:11

    #结果并不是按照数字排序,而是按字母排序。 

    #可以使用-t指定分隔符, 使用-k指定需要排序的列。  

    sort -t ":" -k2 sort.txt 

    d:1 

    f:11 

    #第二行为什么是11?不应该按照顺序排列? 

    c:2 

    b:3 

    a:4 

    e:5

    #按照排序的方式, 只会看到第一个字符,11的第一个字符是1, 按照字符 来排序确实比2小。

    -n  #按照数字的方式进行排序

    sort -t ":" -n -k2 p.txt

    d:1 

    c:2 

    b:3 

    a:4 

    e:5 

    f:11

    #测试案例,下载文件 http://fj.xuliangwei.com/public/ip.txt,对该文件进行排序

    wget http://fj.xuliangwei.com/public/ip.txt

    sort -t. -k3.1,3.1nr -k4.1,4.3nr ip.txt

              第三列的第1-3项,第四列的1-3项


    uniq去重    去重前必须用sort先排序。

    如果文件中有多行完全相同的内容,当前是希望能删除重复的行,同 时还可以统计出完全相同的行出现的总次数, 那么就可以使用uniq命 令解决这个问题(但是必须配合sort使用)。

    -c 计算重复的行 

    选项:-c 计算重复的行

    1.创建一个file.txt文件:

    cat >>file1.txt <<EOF

    abc 

    123 

    abc 

    123 

    EOF

    2.uniq需要和sort一起使用, 先使用sort排序, 让重复内容连续在一 起

    sort file.txt

    123 

    123 

    abc 

    abc

    3.使用uniq去除相邻重复的行

    sort file.txt |uniq

    123 

    abc

    4.-c参数能统计出文件中每行内容重复的次数

    sort file.txt |uniq -c

    2 123      

    2 abc


    cut截取字段


    wc统计行号

    -l    #显示文件行数

    wc -l /etc/fstab     #统计/etc/fstab文件有多少行 

    wc -l /etc/services   #统计/etc/services 文件行号

    例题:   过滤出/etc/passwd以nologin结尾的内容,并统计有多少行

    1.先筛选出目标的行 

    2.然后进行统计

    grep "nologin$" /etc/passwd | wc l -l扩展统计文件行号的方法 

    cat -n /etc/services | tail -1  

    grep -n ".*" /etc/services | tail -1

    #习题 1     分析如下日志,统计每个域名被访问的次数

    cat >> web.log <<EOF http://www.xuliangwei.com/index.html http://www.xuliangwei.com/1.html http://post.xuliangwei.com/index.html http://mp3.xuliangwei.com/index.html http://www.xuliangwei.com/3.html http://post.xuliangwei.com/2.html EOF

    cut -d "/" -f 3 web.log | sort | uniq -c | sort -nr

    awk -F "/" '{print $3}' web.log |sort |uniq -c |sort -nr

    习题2: 使用awk取出系统的IP地址,思路如下:

    1.我要取的值在哪里 ifconfig ens32

    2.如何缩小取值范围(行)

    3.如何精确具体内容(列)

    先拿到结果,然后提取有关键字那一行,最后使用awk取出那一列 [root@oldboyedu ~]# ifconfig ens32|grep "netmask" | awk '{print $2}' 10.0.0.200

    ifconfig ens32 | awk '/netmask/ {print $2}' 

    10.0.0.200


    awk

    awk 用于取出文件中的列或关键字

    -F 设定分隔符

    awk -F "." {print $1,$2} + 文件名或路径 

    #以.为间隔符,打印输出第1列和第2列

    #awk 也用于提取关键字的行

    awk '/root/'    /etc/passwd    在/etc/passwd   #  文件中提取带root关键字的行

    相关文章

      网友评论

        本文标题:Day5-命令查找、文件内容处理命令

        本文链接:https://www.haomeiwen.com/subject/bnhorctx.html