Linux重定向--day13

作者: 风铃科技 | 来源:发表于2019-08-09 16:55 被阅读0次

Linux重定向day13
Linux重定向--day13
Linux / Unix示例中的输入输出重定向
2019-05-21
linux重定向
linux 输入/输出重定向介绍
shell中的重定向
Python 高级 2
生信人的Linux14-24
Shell | 标准输入输出重定向

1.重定向概述
1.什么是重定向
将原本要输出到屏幕的数据信息，重新定向到某个指定的文件中。
2.为什么要使用重定向
- 1.当屏幕输出的信息很重要，而且希望保存重要的信息时；
  2.后台执行中的程序，不希望他干扰屏幕正常的输出结果时；
  3.系统的例行命令, 例如定时任务的执行结果，希望可以存下来时；
  4.一些执行命令，我们已经知道他可能出现错误信息, 想将他直接丢弃时;
  5.错误日志与正确日志需要分别输出至不同的文件保存时;*
3.学习重定向的预备知识，标准输入与输出
*当运行一个程序时通常会自动打开三个标准文件，分别是标准输入、标准输出、错误输出

名称	文件描述符	作用
标准输入（STDIN）	0	默认是键盘，也可以是文件或其他命令的输出。
标准输出（STDOUT）	1	默认输出到屏幕。
错误输出（STDERR）	2	默认输出到屏幕。
文件名称（filename）	3+

进程将从标准输入中得到数据，将正常输出打印至屏幕终端，将错误的输出信息也打印至屏幕终端。
PS: 进程是使用文件描述符(file descriptors)来管理打开的文件

以 cat 命令为例, cat 命令的功能是从命令行给出的文件中读取数据，并将这些数据直接送到标准输出。若使用如下命令：

#会把文件/etc/passwd的内容输出显示到屏幕上
[root@oldboy ~]# cat /etc/passwd
root:x:0:0:root:/root:/bin/bash

但如果使用 cat 命令没有跟上输入的文件名，那么cat命令则会通过命令行标准输入中读取数据, 并将其送到标准输出。

[root@oldboy ~]# cat
wang
wang
wang
wang
^C

#用户输入的每一行都立刻被cat命令输出到屏幕上。

标准输入输出过程

#持续追踪查看文件内容
[root@oldboy ~]# tail -f /etc/passwd

ctrl+z 将进程转到后台
#查看运行的进程
[root@oldboy ~]# ps
   PID TTY          TIME CMD
  7776 pts/0    00:00:00 bash
  7811 pts/0    00:00:00 cat
  7816 pts/0    00:00:00 ps
* 查看tail命令的pid，7811进程下的文件描述符
[root@oldboy ~]# ls -l /proc/7811/fd
total 0
lrwx------. 1 root root 64 Aug  9 16:05 0 -> /dev/pts/0
lrwx------. 1 root root 64 Aug  9 16:05 1 -> /dev/pts/0
lrwx------. 1 root root 64 Aug  9 16:04 2 -> /dev/pts/0

Linux查看标准输入输出设备
[root@wyq ~]# ls -l /dev/std      ---首先要进行挂载

2.输出重定向

输出重定向，改变输出内容的位置。输出重定向有如下几种方式

类型	操作符	用途
标准覆盖输出重定向	>	将程序输出的正确结果输出到指定的文件中,会覆盖文件原有的内容
标准追加输出重定向	>>	将程序输出的正确结果以追加的方式输出到指定文件，不会覆盖原有文件
错误覆盖输出重定向	2>	将程序的错误结果输出到执行的文件中，会覆盖文件原有的内容
错误追加输出重定向	2>>	将程序输出的错误结果以追加的方式输出到指定文件，不会覆盖原有文件
标准输入重定向	<<	将命令中接收输入的途径由默认的键盘更改为指定的文件或命令

案例1: 标准输出重定向(每次都会覆盖文件)

#标准输出重定向, 先清空,后写入, wsd默认创建成功
[root@oldboy ~]# ifconfig ens33 >wsd

例2: 标准输出重定向(会往文件的尾部在添加内容)

#标准追加输出重定向, 向配置文件末尾追加内容
[root@oldboy ~]# echo "I am a students" >> qwe
[root@oldboy ~]# cat qwe 
I am a students

例3: 错误输出重定向

* 正确输出以及错误输出重定向至一个文件
[root@oldboy ~]# useradd xiaokeai
[root@oldboy ~]# su xiaokeai
[xiaokeai@oldboy root]$ 


#将标准输出和标准错误输出重定向到不同文件
find /etc -name "*.conf" 1>a 2>b

例4: 正确和错误都输入到相同位置

#将标准输出和标准错误输出重定向到同一个文件, 混合输出
find /etc -name "*.conf" &>ab

#合并两个文件内容至一个文件
[xiaokeai@oldboy root]$  cat a b > c

例5: 正确和错误都输入到相同位置

#重定向到相同的位置
[root@oldboy ~]# ls /root /error >ab  2>&1

例6: 重定向到空设备/dev/null （黑洞设备，只进不出，相当于垃圾桶）

* 将产生的任何数据放入黑洞设备，则视为丢弃。
[root@oldboy ~]# ls /root /error >ab 2>/dev/null
[root@oldboy ~]# ls /root /error >ab &>/dev/null

3.输入重定向

*输入重定向，即原本从键盘等上获得的输入信息，重定向由命令的输出作为输入。< 等价 0<

案例1: 从文件中读入输入的操作

#没有改变输入的方向，默认键盘
[root@oldboy ~]# mail xiaokeai
Subject: nihao
qwe
qwe
122
.
EOT


#检查是否收到邮件
[root@oldboy ~]# su - xiaokeai
[xiaokeai@oldboy ~]# mail
[xiaokeai@oldboy ~]$ mail
Heirloom Mail version 12.5 7/5/10.  Type ? for help.
"/var/spool/mail/xiaokeai": 1 message 1 new
>N  1 root                  Fri Aug  9 16:25  20/602   "nih"

#输入重定向，来自于文件
[root@oldboy ~]# mail -s "test01" alice < /etc/hosts

案例2: 无法形容案例

#没有改变输入的方向，默认键盘，此时等待输入
[root@oldboy ~]# grep 'root'
www
yyy

[root@oldboy ~]# grep 'root' </etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin


* 例3: 两条命令同时重定向
[root@oldboy ~]# ls;date &>/dev/null 
1.txt  abc              file_i  t.txy  w0022   wsd   z0022
ab     anaconda-ks.cfg  qwe     w000   wang_a  z000
[root@oldboy ~]# ls &>/dev/null; date &>/dev/null
[root@oldboy ~]# (ls; date) &>/dev/null

#后台执行
[root@oldboy ~]# (while :; do date; sleep 2; done) &
[1] 7854

4.进程管道技术

1.什么是管道
管道操作符号 "|" ，主要用来连接左右两个命令, 将左侧的命令的标准输出, 交给右侧命令的标准输入
PS: 无法传递标准错误输出至后者命令*

2.管道流程示意图

3.管道使用案例
案例1: 将/etc/passwd 中的用户按 UID 大小排序*

[root@oldboy ~]# sort -t":" -k3 -n /etc/passwd
[root@oldboy ~]# sort -t":" -k3 -n /etc/passwd -r
[root@oldboy ~]# sort -t":" -k3 -n /etc/passwd |head

案例2: 统计当前/etc/passwd 中用户使用的 shell 类型

#思路:取出第七列(shell) | 排序(把相同归类)| 去重
[root@oldboy ~]# awk -F: '{print $7}' /etc/passwd
[root@oldboy ~]# awk -F: '{print $7}' /etc/passwd |sort
[root@oldboy ~]# awk -F: '{print $7}' /etc/passwd |sort |uniq
[root@oldboy ~]# awk -F: '{print $7}' /etc/passwd |sort |uniq -c

案例3: 统计网站的访问情况 top 20*

#思路: 打印所有访问的连接 | 过滤访问网站的连接 | 打印用户的 IP | 排序 | 去重

[root@oldboy ~]# yum -y install httpd
[root@oldboy ~]# systemctl start httpd
[root@oldboy ~]# systemctl stop firewalld

[root@oldboy ~]# ss -an |grep :80 |awk -F":" '{print $8}' |sort |uniq -c
[root@oldboy ~]]# ss -an |grep :80 |awk -F":" '{print $8}' |sort |uniq -c |sort -k1 -rn |head -n 20

案例4: 打印当前所有 IP

[root@xuliangwei ~]# ip addr |grep 'inet ' |awk '{print $2}' |awk -F"/" '{print $1}'
127.0.0.1
192.168.69.112

4.管道中的tee技术

#选项: -a追加
[root@oldboy ~]# ip addr |grep 'inet ' |tee ip.txt |awk -F"/" '{print $1}' |awk '{print $2}'
127.0.0.1
10.0.0.100

[root@oldboy ~]# cat ip.txt
inet 127.0.0.1/8 scope host lo
inet 10.0.0.100/24 brd 192.168.69.255 scope global ens32

重定向与 tee 有他们在使用过程中有什么区别

[root@oldboy ~]# date > date.txt    #直接将内容写入date.txt文件中
[root@oldboy ~]# date |tee date.txt #命令执行会输出至屏幕，但会同时保存一份至date.txt文件中

5.xargs参数传递，主要让一些不支持管道的命令可以使用管道技术

# which cat|xargs ls- l
# ls |xargs rm -fv
# ls |xargs cp -rvt /tmp/ -或-> ls | xargs -I {} cp -rv {} /tmp/
# ls |xargs mv -t /tmp/   -或-> ls | xargs -I {}  mv {} /tmp