当前位置 : 主页 > 操作系统 > centos >

Linux云计算集群架构师->第十一章 重定向和文件的查找

来源:互联网 收集:自由互联 发布时间:2022-09-29
第十一章 重定向和文件的查找 (上课时间2021-07-01,笔记整理时间2021-07-04) 本节所讲内容: 11.1 文件描述符 0、1、2 11.2 重定向的含义-管道的使用-tee 命令 11.3 which-whereis-locate-grep-find 查找

第十一章 重定向和文件的查找

(上课时间2021-07-01,笔记整理时间2021-07-04)

本节所讲内容:

11.1 文件描述符 0、1、2

11.2 重定向的含义-管道的使用-tee 命令

11.3 which-whereis-locate-grep-find 查找命令

11.4 命令判断

LINUX 下一切皆文件

文件又可分为:普通文件、目录文件、链接文件、设备文件

LINUX 系统使用文件来描述各种硬件设备资源,如:/dev/sda /dev/sdb /dev/sr0

11.1 文件描述符

用户通过操作系统处理信息的过程中,使用的交互设备文件(键盘,鼠标,显示器)

Number Channel name Description Default connection Usage stdin Standard input keyboard read only 1 stdout Standard input Terminal Write only 2 stderr Standard error Terminal Write only 3+ filename Other files none read and/or Write

11.1.1 输入输出标准说明

STDIN 标准输入 默认的设备是键盘 文件编号为:0

STDOUT 标准输出 默认的设备是显示器 文件编号为:1 ,也可以重定向到文件

STDERR 标准错误 默认的设备是显示器 文件编号为:2 ,也可以重定向到文件

image-20210703192904491

查看一个进程打开了哪些文件?

语法: ll /proc/进程 ID/fd

[root@Centos83 ~]# ps -aux | grep vim root 18728 0.1 0.8 49588 8484 pts/1 S+ 19:37 0:00 vim /etc/shadow root 18738 0.0 0.1 12344 1072 pts/0 S+ 19:37 0:00 grep --color=auto vim [root@Centos83 ~]# ll /proc/18728/fd #查看打开的文件 总用量 0 lrwx------ 1 root root 64 7月 3 19:37 0 -> /dev/pts/1 #0 文件描述符 lrwx------ 1 root root 64 7月 3 19:37 1 -> /dev/pts/1 #1 文件描述符 lrwx------ 1 root root 64 7月 3 19:37 2 -> /dev/pts/1 #2 文件描述符 lr-x------ 1 root root 64 7月 3 19:37 3 -> /var/lib/sss/mc/passwd lrwx------ 1 root root 64 7月 3 19:37 4 -> 'socket:[197579]'

注: 这些 0,1,2,4 就是文件的描述符。一个进程启动时,都会打开 3 个文件:标准输入、标准输出和标准出错处理。

这 3 个文件分别对应文件描述符为 0、1 和 2 也就是宏替换 STDIN_FILENO、STDOUT_FILENO 和 STDERR_FILENO。

/proc/进程 ID/fd #这个 fd 目录下,专门存文件描述符

注:对文件描述符的操作就是对文件本身的操作。 我可以直接通过操作文件描述来修改文件。

例 2:查看和临时设置一个进程最多可以打开几个文件,即:一个进程可以打开的文件描述符限制

[root@Centos83 ~]# ulimit -n # 查看一个进程最多可以同时打开的文件数 1024 [root@Centos83 ~]# ulimit -n 2048 # 修改一个进程最多可以同时打开的文件数为 2048 [root@Centos83 ~]# ulimit -n 2048

11.2 重定向的含义-管道的使用-tee 命令

11.2.1 输出重定向

定义:将命令的正常输出结果保存到指定的文件中,而不是直接显示在显示器的屏幕上重定向输出使用”>” “>>” 操作符号

语法: > 文件名 #表示将标准输出的内容,写到后面的文件中,如果此文件名已经存在,将会覆盖原文件中的内容

>> 文件名 #表示将标准输出的内容,追加到后面的文件中。若重定向的输出的文件不存在,则会新建该文件

查看当前主机的 CPU 的类型保存到 cpu.txt 文件中(而不是直接显示到屏幕上)

[root@Centos83 ~]# cat /proc/cpuinfo > cpu.txt #将内核的版本信息追加到 cpu.txt [root@Centos83 ~]# uname -a >> cpu.txt #将计算机名和操作系统的信息追加到cpu.txt [root@Centos83 ~]# cat cpu.txt [root@Centos83 ~]# uname -a > cpu.txt #清空cpu.txt 将uname 信息写入到cpu.txt

11.2.2 输入重定向

将命令中接收输入的途径由默认的键盘改为其他文件.而不是等待从键盘输入

[root@Centos83 ~]# grep root /etc/passwd root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin [root@Centos83 ~]# grep root < /etc/passwd root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin

11.2.3 EOF

EOF 本意是 End Of File,表明到了文件末尾。”EOF“通常与”<<“结合使用,“<<EOF“表示后续的输入作为子命令或子 shell 的输入,直到遇到”EOF“,再次返回到主调 shell,可将其理解为分界符(delimiter)。既然是分界符,那么形式自然不是固定的,这里可以将”EOF“可以进行自定义,但是前后的”EOF“必须成对出现且不能和 shell 命令冲突。

以<<EOF 开始,以 EOF 结尾 。

[root@Centos83 ~]# cat > eof.txt <<EOF > abc > def > ghi > 123 > 345 > 789 > 1011 > EOF #只输入红色文字部分,>为 EOF 的交互输入提示符。 [root@Centos83 ~]# cat eof.txt

以 abc 作为分界符

[root@Centos83 ~]# cat abc.txt <<abc > eof > EOF > abc

在脚本中我们可以通过重定向输入来打印消息菜单

在使用的时候需要在”<< “右边跟一对终止符。终止符是可以自定义

[root@Centos83 ~]# vim eof.sh #!/bin/bash cat <<efo ======================== 1.mysql 2.httpd 3.oracle ======================= efo [root@Centos83 ~]# vim eof.sh [root@Centos83 ~]# chmod +x eof.sh [root@Centos83 ~]# ./eof.sh #查看效果 ======================== 1.mysql 2.httpd 3.oracle =======================

11.2.4 错误重定向

将命令执行过程中出现的错误信息 (选项或参数错误) 保存到指定的文件,而不是直接显示到显示器

作用:错误信息保存到文件

操作符: 错误重定向符号:2>

2 指的是标准错误输出的文件描述符

在实际应用中,错误重定向可以用来收集执行的错误信息.为排错提供依据;对于 shell 脚本还可以将无关紧要的错误信息重定向到空文件/dev/null 中,以保持脚本输出的简洁

例 1: 将错误显示的内容和正确显示的内容分开

[root@Centos83 ~]# ls /etc/passwc 2> err.txt #将错误的结果输入到err.txt [root@Centos83 ~]# cat err.txt

注:使用 2> 操作符时,会像使用 > 一样覆盖目标文件的内容,若追加而不覆盖文件的内容即可使用 2>> 操作符

11.2.5 null 黑洞和 zero 空文件

1、把/dev/null 看作"黑洞",所有写入它的内容都会永远丢失. 而尝试从它那儿读取内容则什么也读不到. 然而 /dev/null 对命令行和脚本都非常的有用.

[root@Centos83 ~]# echo test > /dev/null [root@Centos83 ~]# cat /dev/null #什么信息也看不到

2、/dev/zero 在类 UNIX 操作系统中, /dev/zero 是一个特殊的文件,当你读它的时候,它会提供无限的空字符(NULL, ASCII NUL, 0x00)。典型用法是用它来产生一个特定大小的空白文件。

使用 dd 命令产生一个 50M 的文件 参数:

if 代表输入文件。如果不指定 if,默认就会从 stdin 中读取输入。

of 代表输出文件。如果不指定 of,默认就会将 stdout 作为默认输出。

bs 代表字节为单位的块大小。

count 代表被复制的块数。

[root@Centos83 ~]# dd if=/dev/zero of=zero.txt bs=2M count=100 记录了100+0 的读入记录了100+0 的写出209715200 bytes (210 MB, 200 MiB) copied, 0.29557 s, 710 MB/s [root@Centos83 ~]# du -sh zero.txt 200M zero.txt [root@Centos83 ~]# cat zero.txt #什么也不显示

正确的内容写入一个文件,错误的写入一个文件

[root@Centos83 ~]# ls /tmp abcd >ok.txt 2>err.txt

11.2.6 >&符号

&表示等同于的意思

例 1:把正确和错误的消息输入到相同的位置

1>&2 把标准输出重定向到标准错误

2>&1 把标准错误重定向到标准输出,如图:

image-20210703202746484

例 2:把正确和错误的消息输入到相同的位置

image-20210703203011968

[root@Centos83 ~]# ls /tmp abcd >1.txt 2>&1 [root@Centos83 ~]# ls /tmp abcd 2>1.txt 2>&1 [root@Centos83 ~]# cat /etc/passwd abc > /dev/null 2>&1 #将标准输出和错误输出全部重定向到/dev/null 中,也就是将产生的所有信息丢弃.

11.2.7 管道 | 的使用

语法:command-a | command-b | command-c | ......

image-20210703215106547

上图可以简单理解为:管道符左边命令的结果作为管道符右边命令的标准输入

注意:

1、管道命令只处理前一个命令正确输出,不处理错误输出

2、管道右边的命令,必须能够接收标准输入的数据流命令才行

3、管道符可以把两条命令连起来,它可以链接多个命令使用

11.2.8 tee 命令

功能:读取标准输入的数据,并将其内容输出成文件。

语法:tee [-a][--help][--version][文件...]

参数:

-a, --append 内容追加到给定的文件而非覆盖

--help 在线帮助

tee 指令会从标准输入设备读取数据,将其内容输出到标准输出设备,同时保存成文件

[root@Centos83 ~]# df -h | tee disk.log # 将磁盘使用的信息写入文件 [root@Centos83 ~]# df -h | tee -a disk.log # 将文件系统使用的信息追加到文件

11.3 文件查找常用命令

11.3.2 which-whereis-locate-grep find 命令使用

查找文件一般有以下几个命令:

which 查看可执行文件的位置

whereis 查看可执行文件的位置及相关文件

locate 配合数据库缓存,快速查看文件位置

grep 过滤匹配,它是一个文件搜索工具

find 查找相关文件

[root@Centos83 ~]# which cd/usr/bin/cd [root@Centos83 ~]# whereis cd cd: /usr/bin/cd /usr/share/man/man1/cd.1.gz /usr/share/man/man1p/cd.1p.gz [root@Centos83 ~]# whereis ls ls: /usr/bin/ls /usr/share/man/man1/ls.1.gz /usr/share/man/man1p/ls.1p.gz

locate 命令和 find -name 功能差不多,是它的另外一种写法,但是这个要比 find 搜索快的多,因为 find 命令查找的是具体目录文件,而 locate 它搜索的是一个数据库

/var/lib/mlocate/mlocate.db,这个数据库中存有本地所有的文件信息;这个数据库是 Linux 自动创建并每天自动更新维护。相关的配置信息在/etc/updatedb.conf,查看定时任务信息在/etc/cron.daily/mlocate

[root@Centos83 ~]# yum -y install mlocate [root@Centos83 ~]# touch /opt/xuegod.txt [root@Centos83 ~]# locate mygod.txt #发现找不到文件[root@Centos83 ~]# updatedb #如果对当天文件查找,需要手动更新数据库updatedb [root@Centos83 ~]# locate mygod /opt/mygod.txt/opt/mygod_dump1/var/test/mygod/var/test/mygod/abc

grep 查找使用

作用:过滤,它能够使用正则表达式来搜索文本,并把结果打印出来

参数:

-v 取反

-i 忽略大小写

^# 以#开头

#$ 以#结尾

^$ 空行

-n 对过滤的内容加上行号

| 或者的意思

[root@Centos83 ~]# ps -aux | grep sshd | grep -v greproot 1084 0.0 0.2 94436 2140 ? Ss 7月02 0:00 /usr/ [root@Centos83 ~]# cat /etc/passwd | grep ^a #以 a 开头 [root@Centos83 ~]# grep bash$ /etc/passwd #以 bash 结尾 [root@Centos83 ~]# grep "nologin\|root" /etc/passwd | wc -l #\ 表示转义符46 [root@Centos83 ~]# egrep "nologin|root" /etc/passwd | wc -l #查看包括 nologin 或 root 的行46

egrep 是 grep 加强版本

11.3.3 find 命令使用

格式:find pathname -options [-print]

命令字 路径名称 选项 输出

参数:

pathname: find 命令所查找的目录路径,不输入代表当前目录例如用 . 来表示当前目录,用 / 来表示系统根目录。

find 命令选项:

-name 按照文件名查找文件。 “名称”

-perm 按照文件权限来查找文件。666 777 等

-user 按照文件属主来查找文件

-group 按照文件所属的组来查找文件

-mtime -n / +n 按照文件的更改时间来查找文件,

  • n 表示文件更改时间距现在 n 天以内
  • n表示文件更改时间距现在 n 天以前

  • -type 查找某一类型的文件

  • b - 块设备文件

  • d - 目录

  • c - 字符设备文件

  • p - 管道文件

  • l- 符号链接文件

  • f - 普通文件

    -size n 查找符合指定的文件大小的文件

    -exec 对匹配的文件执行该参数所给出的其他 linux 命令, 相应命令的形式为' 命令 {} ;,注意{ }和 \;之间的空格,{}代表查到的内容

[root@Centos83 ~]# find . -name "*.txt" #查看当前目录下所有的 TXT 格式的文件

2、按照更改时间或访问时间等查找文件

如果希望按照更改时间来查找文件,可以使用 mtime,atime 或 ctime 选项

mtime: 文件最后一次修改的时间

atime: 最后一次访问时间

ctime: 文件的最后一次变化时间,也就是修改时间

[root@Centos83 ~]# find /root/ -mtime -1 #查找更改时间在 1 天以内,被***修改的文件

对查找内容执行相应命令

-exec 这个选项参数后面可以跟自定义的 SHELL 命令,格式如下:

image-20210704092047738

[root@Centos83 ~]# find /root -name "*.txt" -exec cp {} /opt/ \; #把查找到的文件复制到一个指定的目录

xargs 和 find 命令结合 复制文件 -i 表示 find 传递给 xargs 的结果 由{}来代替

查找多个类型文件

比较符的使用:

-a and 并且

-o or 或者

+超过

-低于

按权限查找:-perm

[root@Centos83 ~]# find /bin/ -perm 755 # 等于 0755 权限的文件或目录 [root@Centos83 ~]# find /bin/ -perm -644 # -表示至少,至少有 644 权限的文件或目录 [root@Centos83 ~]# find /bin/ -perm -777 #至少有 777 权限 [root@Centos83 ~]# find / -type f -perm -777 #把系统中权限不低于 777 的危险文件查找出来

查找的目录深度:

-maxdepth 1 #只查找目录第一层的文件和目录

查找/bin 目录下权限等于 644 的文件

[root@Centos83 ~]# find /bin/ -maxdepth 1 -perm 755 #/bin 后面要有/ [root@Centos83 ~]# find /bin -maxdepth 1 -perm 755 #没加/无法满足我们的需求

11.4 命令判断

11.4.1 常用的三个特殊符号

1、 ;分号 不考虑指令的相关性,连续执行, 分号; 不保证命令全部执行成功的

[root@Centos83 ~]# ofc ; echo aa

&& 逻辑与====》它是只有在前面的命令执行成功后,后面的命令才会去执行 如果/opt 目录存在,则在/opt 下面新建一个文件test.txt

[root@Centos83 ~]# cd /opt/ && touch /opt/test.txt && ls

2、 || 逻辑或===》如果前面的命令执行成功,后面的命令就不去执行了;或者如果前面的执行不成功,才会去执行后面的命令

[root@Centos83 mnt]# ls /etc/passwd || cd /etc/etc/passwd

总结:

命令情况 说 明

命令 1 && 命令 2 如果命令 1 执行,且执行正确($? = 0),然后执行命令 2

如果命令 1 执行完成,但是执行错误($? ≠0),那么后面的命令是不会执行的

命令 1 || 命令 2如果命令 1 执行,且执行正确($? = 0),那么命令 2 不执行

如果命令 1 执行,但执行错误($? ≠ 0),那么命令 2 执行

运算顺序:LINUX 执行命令,是从左到右一个一个执行,从上到下执行

总结:

11.1 文件描述符 0、1、2

11.2 重定向的含义-管道的使用-tee 命令

11.3 which-whereis-locate-grep-find 查找命令

11.4 命令判断

网友评论