第十一章 重定向和文件的查找
(上课时间2021-07-01,笔记整理时间2021-07-04)
本节所讲内容:
11.1 文件描述符 0、1、2
11.2 重定向的含义-管道的使用-tee 命令
11.3 which-whereis-locate-grep-find 查找命令
11.4 命令判断
LINUX 下一切皆文件
文件又可分为:普通文件、目录文件、链接文件、设备文件
LINUX 系统使用文件来描述各种硬件设备资源,如:/dev/sda /dev/sdb /dev/sr0
11.1 文件描述符
用户通过操作系统处理信息的过程中,使用的交互设备文件(键盘,鼠标,显示器)
Number Channel name Description Default connection Usage stdin Standard input keyboard read only 1 stdout Standard input Terminal Write only 2 stderr Standard error Terminal Write only 3+ filename Other files none read and/or Write11.1.1 输入输出标准说明
STDIN 标准输入 默认的设备是键盘 文件编号为:0
STDOUT 标准输出 默认的设备是显示器 文件编号为:1 ,也可以重定向到文件
STDERR 标准错误 默认的设备是显示器 文件编号为:2 ,也可以重定向到文件
查看一个进程打开了哪些文件?
语法: ll /proc/进程 ID/fd
[root@Centos83 ~]# ps -aux | grep vim root 18728 0.1 0.8 49588 8484 pts/1 S+ 19:37 0:00 vim /etc/shadow root 18738 0.0 0.1 12344 1072 pts/0 S+ 19:37 0:00 grep --color=auto vim [root@Centos83 ~]# ll /proc/18728/fd #查看打开的文件 总用量 0 lrwx------ 1 root root 64 7月 3 19:37 0 -> /dev/pts/1 #0 文件描述符 lrwx------ 1 root root 64 7月 3 19:37 1 -> /dev/pts/1 #1 文件描述符 lrwx------ 1 root root 64 7月 3 19:37 2 -> /dev/pts/1 #2 文件描述符 lr-x------ 1 root root 64 7月 3 19:37 3 -> /var/lib/sss/mc/passwd lrwx------ 1 root root 64 7月 3 19:37 4 -> 'socket:[197579]'注: 这些 0,1,2,4 就是文件的描述符。一个进程启动时,都会打开 3 个文件:标准输入、标准输出和标准出错处理。
这 3 个文件分别对应文件描述符为 0、1 和 2 也就是宏替换 STDIN_FILENO、STDOUT_FILENO 和 STDERR_FILENO。
/proc/进程 ID/fd #这个 fd 目录下,专门存文件描述符
注:对文件描述符的操作就是对文件本身的操作。 我可以直接通过操作文件描述来修改文件。
例 2:查看和临时设置一个进程最多可以打开几个文件,即:一个进程可以打开的文件描述符限制
[root@Centos83 ~]# ulimit -n # 查看一个进程最多可以同时打开的文件数 1024 [root@Centos83 ~]# ulimit -n 2048 # 修改一个进程最多可以同时打开的文件数为 2048 [root@Centos83 ~]# ulimit -n 204811.2 重定向的含义-管道的使用-tee 命令
11.2.1 输出重定向
定义:将命令的正常输出结果保存到指定的文件中,而不是直接显示在显示器的屏幕上重定向输出使用”>” “>>” 操作符号
语法: > 文件名 #表示将标准输出的内容,写到后面的文件中,如果此文件名已经存在,将会覆盖原文件中的内容
>> 文件名 #表示将标准输出的内容,追加到后面的文件中。若重定向的输出的文件不存在,则会新建该文件
查看当前主机的 CPU 的类型保存到 cpu.txt 文件中(而不是直接显示到屏幕上)
[root@Centos83 ~]# cat /proc/cpuinfo > cpu.txt #将内核的版本信息追加到 cpu.txt [root@Centos83 ~]# uname -a >> cpu.txt #将计算机名和操作系统的信息追加到cpu.txt [root@Centos83 ~]# cat cpu.txt [root@Centos83 ~]# uname -a > cpu.txt #清空cpu.txt 将uname 信息写入到cpu.txt11.2.2 输入重定向
将命令中接收输入的途径由默认的键盘改为其他文件.而不是等待从键盘输入
[root@Centos83 ~]# grep root /etc/passwd root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin [root@Centos83 ~]# grep root < /etc/passwd root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin11.2.3 EOF
EOF 本意是 End Of File,表明到了文件末尾。”EOF“通常与”<<“结合使用,“<<EOF“表示后续的输入作为子命令或子 shell 的输入,直到遇到”EOF“,再次返回到主调 shell,可将其理解为分界符(delimiter)。既然是分界符,那么形式自然不是固定的,这里可以将”EOF“可以进行自定义,但是前后的”EOF“必须成对出现且不能和 shell 命令冲突。
以<<EOF 开始,以 EOF 结尾 。
[root@Centos83 ~]# cat > eof.txt <<EOF > abc > def > ghi > 123 > 345 > 789 > 1011 > EOF #只输入红色文字部分,>为 EOF 的交互输入提示符。 [root@Centos83 ~]# cat eof.txt以 abc 作为分界符
[root@Centos83 ~]# cat abc.txt <<abc > eof > EOF > abc在脚本中我们可以通过重定向输入来打印消息菜单
在使用的时候需要在”<< “右边跟一对终止符。终止符是可以自定义
[root@Centos83 ~]# vim eof.sh #!/bin/bash cat <<efo ======================== 1.mysql 2.httpd 3.oracle ======================= efo [root@Centos83 ~]# vim eof.sh [root@Centos83 ~]# chmod +x eof.sh [root@Centos83 ~]# ./eof.sh #查看效果 ======================== 1.mysql 2.httpd 3.oracle =======================11.2.4 错误重定向
将命令执行过程中出现的错误信息 (选项或参数错误) 保存到指定的文件,而不是直接显示到显示器
作用:错误信息保存到文件
操作符: 错误重定向符号:2>
2 指的是标准错误输出的文件描述符
在实际应用中,错误重定向可以用来收集执行的错误信息.为排错提供依据;对于 shell 脚本还可以将无关紧要的错误信息重定向到空文件/dev/null 中,以保持脚本输出的简洁
例 1: 将错误显示的内容和正确显示的内容分开
[root@Centos83 ~]# ls /etc/passwc 2> err.txt #将错误的结果输入到err.txt [root@Centos83 ~]# cat err.txt注:使用 2> 操作符时,会像使用 > 一样覆盖目标文件的内容,若追加而不覆盖文件的内容即可使用 2>> 操作符
11.2.5 null 黑洞和 zero 空文件
1、把/dev/null 看作"黑洞",所有写入它的内容都会永远丢失. 而尝试从它那儿读取内容则什么也读不到. 然而 /dev/null 对命令行和脚本都非常的有用.
[root@Centos83 ~]# echo test > /dev/null [root@Centos83 ~]# cat /dev/null #什么信息也看不到2、/dev/zero 在类 UNIX 操作系统中, /dev/zero 是一个特殊的文件,当你读它的时候,它会提供无限的空字符(NULL, ASCII NUL, 0x00)。典型用法是用它来产生一个特定大小的空白文件。
使用 dd 命令产生一个 50M 的文件 参数:
if 代表输入文件。如果不指定 if,默认就会从 stdin 中读取输入。
of 代表输出文件。如果不指定 of,默认就会将 stdout 作为默认输出。
bs 代表字节为单位的块大小。
count 代表被复制的块数。
[root@Centos83 ~]# dd if=/dev/zero of=zero.txt bs=2M count=100 记录了100+0 的读入记录了100+0 的写出209715200 bytes (210 MB, 200 MiB) copied, 0.29557 s, 710 MB/s [root@Centos83 ~]# du -sh zero.txt 200M zero.txt [root@Centos83 ~]# cat zero.txt #什么也不显示正确的内容写入一个文件,错误的写入一个文件
[root@Centos83 ~]# ls /tmp abcd >ok.txt 2>err.txt11.2.6 >&符号
&表示等同于的意思
例 1:把正确和错误的消息输入到相同的位置
1>&2 把标准输出重定向到标准错误
2>&1 把标准错误重定向到标准输出,如图:
例 2:把正确和错误的消息输入到相同的位置
[root@Centos83 ~]# ls /tmp abcd >1.txt 2>&1 [root@Centos83 ~]# ls /tmp abcd 2>1.txt 2>&1 [root@Centos83 ~]# cat /etc/passwd abc > /dev/null 2>&1 #将标准输出和错误输出全部重定向到/dev/null 中,也就是将产生的所有信息丢弃.11.2.7 管道 | 的使用
语法:command-a | command-b | command-c | ......
上图可以简单理解为:管道符左边命令的结果作为管道符右边命令的标准输入
注意:
1、管道命令只处理前一个命令正确输出,不处理错误输出
2、管道右边的命令,必须能够接收标准输入的数据流命令才行
3、管道符可以把两条命令连起来,它可以链接多个命令使用
11.2.8 tee 命令
功能:读取标准输入的数据,并将其内容输出成文件。
语法:tee [-a][--help][--version][文件...]
参数:
-a, --append 内容追加到给定的文件而非覆盖
--help 在线帮助
tee 指令会从标准输入设备读取数据,将其内容输出到标准输出设备,同时保存成文件
[root@Centos83 ~]# df -h | tee disk.log # 将磁盘使用的信息写入文件 [root@Centos83 ~]# df -h | tee -a disk.log # 将文件系统使用的信息追加到文件11.3 文件查找常用命令
11.3.2 which-whereis-locate-grep find 命令使用
查找文件一般有以下几个命令:
which 查看可执行文件的位置
whereis 查看可执行文件的位置及相关文件
locate 配合数据库缓存,快速查看文件位置
grep 过滤匹配,它是一个文件搜索工具
find 查找相关文件
[root@Centos83 ~]# which cd/usr/bin/cd [root@Centos83 ~]# whereis cd cd: /usr/bin/cd /usr/share/man/man1/cd.1.gz /usr/share/man/man1p/cd.1p.gz [root@Centos83 ~]# whereis ls ls: /usr/bin/ls /usr/share/man/man1/ls.1.gz /usr/share/man/man1p/ls.1p.gzlocate 命令和 find -name 功能差不多,是它的另外一种写法,但是这个要比 find 搜索快的多,因为 find 命令查找的是具体目录文件,而 locate 它搜索的是一个数据库
/var/lib/mlocate/mlocate.db,这个数据库中存有本地所有的文件信息;这个数据库是 Linux 自动创建并每天自动更新维护。相关的配置信息在/etc/updatedb.conf,查看定时任务信息在/etc/cron.daily/mlocate
[root@Centos83 ~]# yum -y install mlocate [root@Centos83 ~]# touch /opt/xuegod.txt [root@Centos83 ~]# locate mygod.txt #发现找不到文件[root@Centos83 ~]# updatedb #如果对当天文件查找,需要手动更新数据库updatedb [root@Centos83 ~]# locate mygod /opt/mygod.txt/opt/mygod_dump1/var/test/mygod/var/test/mygod/abcgrep 查找使用
作用:过滤,它能够使用正则表达式来搜索文本,并把结果打印出来
参数:
-v 取反
-i 忽略大小写
^# 以#开头
#$ 以#结尾
^$ 空行
-n 对过滤的内容加上行号
| 或者的意思
[root@Centos83 ~]# ps -aux | grep sshd | grep -v greproot 1084 0.0 0.2 94436 2140 ? Ss 7月02 0:00 /usr/ [root@Centos83 ~]# cat /etc/passwd | grep ^a #以 a 开头 [root@Centos83 ~]# grep bash$ /etc/passwd #以 bash 结尾 [root@Centos83 ~]# grep "nologin\|root" /etc/passwd | wc -l #\ 表示转义符46 [root@Centos83 ~]# egrep "nologin|root" /etc/passwd | wc -l #查看包括 nologin 或 root 的行46egrep 是 grep 加强版本
11.3.3 find 命令使用
格式:find pathname -options [-print]
命令字 路径名称 选项 输出
参数:
pathname: find 命令所查找的目录路径,不输入代表当前目录例如用 . 来表示当前目录,用 / 来表示系统根目录。
find 命令选项:
-name 按照文件名查找文件。 “名称”
-perm 按照文件权限来查找文件。666 777 等
-user 按照文件属主来查找文件
-group 按照文件所属的组来查找文件
-mtime -n / +n 按照文件的更改时间来查找文件,
- n 表示文件更改时间距现在 n 天以内
-
n表示文件更改时间距现在 n 天以前
-
-type 查找某一类型的文件
-
b - 块设备文件
-
d - 目录
-
c - 字符设备文件
-
p - 管道文件
-
l- 符号链接文件
-
f - 普通文件
-size n 查找符合指定的文件大小的文件
-exec 对匹配的文件执行该参数所给出的其他 linux 命令, 相应命令的形式为' 命令 {} ;,注意{ }和 \;之间的空格,{}代表查到的内容
2、按照更改时间或访问时间等查找文件
如果希望按照更改时间来查找文件,可以使用 mtime,atime 或 ctime 选项
mtime: 文件最后一次修改的时间
atime: 最后一次访问时间
ctime: 文件的最后一次变化时间,也就是修改时间
[root@Centos83 ~]# find /root/ -mtime -1 #查找更改时间在 1 天以内,被***修改的文件对查找内容执行相应命令
-exec 这个选项参数后面可以跟自定义的 SHELL 命令,格式如下:
[root@Centos83 ~]# find /root -name "*.txt" -exec cp {} /opt/ \; #把查找到的文件复制到一个指定的目录xargs 和 find 命令结合 复制文件 -i 表示 find 传递给 xargs 的结果 由{}来代替
查找多个类型文件
比较符的使用:
-a and 并且
-o or 或者
+超过
-低于
按权限查找:-perm
[root@Centos83 ~]# find /bin/ -perm 755 # 等于 0755 权限的文件或目录 [root@Centos83 ~]# find /bin/ -perm -644 # -表示至少,至少有 644 权限的文件或目录 [root@Centos83 ~]# find /bin/ -perm -777 #至少有 777 权限 [root@Centos83 ~]# find / -type f -perm -777 #把系统中权限不低于 777 的危险文件查找出来查找的目录深度:
-maxdepth 1 #只查找目录第一层的文件和目录
查找/bin 目录下权限等于 644 的文件
[root@Centos83 ~]# find /bin/ -maxdepth 1 -perm 755 #/bin 后面要有/ [root@Centos83 ~]# find /bin -maxdepth 1 -perm 755 #没加/无法满足我们的需求11.4 命令判断
11.4.1 常用的三个特殊符号
1、 ;分号 不考虑指令的相关性,连续执行, 分号; 不保证命令全部执行成功的
[root@Centos83 ~]# ofc ; echo aa&& 逻辑与====》它是只有在前面的命令执行成功后,后面的命令才会去执行 如果/opt 目录存在,则在/opt 下面新建一个文件test.txt
[root@Centos83 ~]# cd /opt/ && touch /opt/test.txt && ls2、 || 逻辑或===》如果前面的命令执行成功,后面的命令就不去执行了;或者如果前面的执行不成功,才会去执行后面的命令
[root@Centos83 mnt]# ls /etc/passwd || cd /etc/etc/passwd总结:
命令情况 说 明
命令 1 && 命令 2 如果命令 1 执行,且执行正确($? = 0),然后执行命令 2
如果命令 1 执行完成,但是执行错误($? ≠0),那么后面的命令是不会执行的
命令 1 || 命令 2如果命令 1 执行,且执行正确($? = 0),那么命令 2 不执行
如果命令 1 执行,但执行错误($? ≠ 0),那么命令 2 执行
运算顺序:LINUX 执行命令,是从左到右一个一个执行,从上到下执行
总结:
11.1 文件描述符 0、1、2
11.2 重定向的含义-管道的使用-tee 命令
11.3 which-whereis-locate-grep-find 查找命令
11.4 命令判断