命令指南

3种类型的时间戳

GUN/Linux的文件包含3种类型的时间戳

Access: 2020-01-02 20:05:17.117999915 +0800    # 文件最后被访问的时间
Modify: 2020-01-02 20:05:17.117999915 +0800    # 文件最后被修改的时间
Change: 2020-01-02 20:05:17.117999915 +0800    # 文件状态最后被改变的时间

对应ls命令,查看上述时间戳的选项如下

mtime:最后修改时间(ls -lt) # 修改文件内容,文件的修改时间(modify time)会改变
ctime:状态改变时间(ls -lc) # 修改文件内容、移动文件或改变文件属性等,文件的change时间会改变
atime:最后访问时间(ls -lu) # 查看文件内容时,文件的访问时间(access time)会改变

Linux文件及目录管理命令基础

shutdown

实例

常见的关机、重启、注销命令集合

PS1变量

如需要让PS1变量永久生效,编辑/etc/bashrc文件,定位到36行,将内容中的大写的W改为小写的w,即可让变量永久生效.执行 source /etc/bashrc使得修改信息生效

PWD *****:显示当前所在位置的信息

cd *****:切换目录

tree ****:以树形结构显示目录下的内容

mkdir*****:创建目录

touch*****:创建文件或更改文件时间戳

ls*****:显示目录下内容及属性信息的命令

cp*****:复制文件或目录

cp覆盖文件不提示的是否覆盖的几种方法

1. which cp --> usr/bin/cp file1.txt file2.txt 使用cp命令的绝对路径屏蔽别名
2. \cp file1.txt file2.txt 使用'\'屏蔽别名
3. alias取消别名 unalias cp 系统重启失效
4. cat ~/.bashrc 编辑 aliascp='cp -i',重启后生效.'.bashrc'会在开机时加载 不建议使用,只用于开拓思路

快速备份文件案例

cp /etc/ssh/sshd_config /etc/ssh/sshd_config.ori
# 上面的格式中,有一部分路径重复了,使用{}进行快捷输入命令,这两种方法是等效的

cp /etc/ssh/sshd_config{,.ori}
# 这种方法的原理是bash对大括号的展开操作,/etc/ssh/sshd_config{,.ori}展开成/etc/ssh/sshd_config /etc/ssh/sshd_config.ori再传给cp命令

mv*****:移动或重命名文件

• mv dir1/file* ------>"file*"匹配所有以file开头的文件 将dir1/file**的文件移动到当前所在位置

rm:删除文件或目录

• 补充:慎用rsync --delete

  • 多数情况下,删除数据后是可以恢复的(例如,可通过恢复工具ext3grep来实现),但一定会影响业务,例如,造成停机,或者数据丢失了较长时间,用户访问不了等.

Linux文件过滤及内容编辑处理

vi/vim*****:纯文本编辑器

vi是Linux命令行界面下的重要文字编辑器.vim是vi的增强版,例如,高亮显示代码、自动缩进等.vim与vi是兼容的,建议使用vim编辑器代替vi编辑器

用法格式

vim  [option] [file]
vim  选项      文件

vim分为三种模式:普通模式、编辑模式、命令模式,作用分别如下:

1. 普通模式:用vim命令打开文件后,默认的状态就是普通模式.在这个模式中,不能进行编辑输入操作,但可以按"上下左右"键来移动光标,同时还可以执行一些操作命令进行如删除、赋值、粘贴等工作.
2. 编辑模式:在普通模式下不能进行编辑输入模式,只有按下"i,I,o,O,a,A,r,R,s,S"(其中"i"最常用)等字幕进入编辑模式后才可以执行录入文字等编辑操作.确定文件是否处于编辑模式状态有一个重要特征,那就是在窗口的左下角要有插入的标记 "-- INSERT --"或"-- 插入 --"
3. 命令模式:在普通模式下,输入":"或"/"或"?"时,光标会自动定位在那一行,在这个模式中可以执行保存、退出、搜索、替换、显示行号等相关操作

image-20200108093711473.png

vim打开文件的其他几种方法

echo*****:显示输出文本内容

可以使用;连接两个echo命令

[root@grape tmp]# echo -e "\033[46;31mhello,world \033[0m" 打印彩色输出,范围是[40-47;30-37m

cat*****:合并文件或查看文件内容

concatenate缩写,功能是连接多个文件并且打印到屏幕输出,或者重定向到指定文件中.此命令常用于显示单个文件内容,或者将几个文件内容连接起来一起显示,还可以从标准输入中读取内容并显示,生产环境中,常与重定向或追加符配合使用.

重定向符

echo 123 1>a.txt 2>b.txt
# 此条命令如果执行成功,则a文件会写入123.执行失败b文件会写入错误提示.

more****:分页显示文件内容

less*****:分页显示文件内容 高级的more命令

head*****:显示头部信息

tail*****:显示文件内容尾部

# 从第15行开始显示文件
tail -n +15 /etc/passwd   # 扩展的用法,不常用

grep*****:文本过滤工具

# 显示所有行的行号,"."代表匹配任意单个字符,即匹配了所有的内容
grep -n '.' /etc/passwd

tr*****:替换或删除字符

tr 'abc' 'xyz' < test.txt  # tr命令比较特殊,需要输入重定向符<
凡是在文本中出现的a全部替换为x,b替换为y,c替换为z
支持正则匹配,例:
tr '[a-z]' '[A-Z]' > test.txt  # 小写转大写

Linux文件类型及查找命令

Linux文件属性概述

[root@grape tmp]# ll -ih
total 420K
 67194889 -rw-r--r--. 1 root root   18 Jan  9 11:36 -
   887635 drwxr-xr-x. 2 root root   37 Dec 30 11:31 12-27
 33554508 drwxr-xr-x. 2 root root   37 Jan  5 18:18 12-27.ori
 67193827 -rw-r--r--. 1 root root    0 Jan  9 09:31 123

{9IL_$RIFMU%X544F2Q1M8M.png

文件属性详解

第一列:Inode索引节点编号(相当于人的身份证,是唯一的);系统读取文件时首先通过文件名找到Inode号码,然后才能读取到文件内容

第二列和第三列:文件类型及权限.这一列共包含11个字符,其中第一个字符为文件类型,随后的9个字符为文件的对应权限,最后一个字符点号"."是与SELinux有关的一个标识

第四列:硬链接个数(参考ln命令).相当于超市的多个入口,可以从不同的文件入口进入文件,还可以互为备份.

第五列:文件或目录所属的用户(属主).在Linux系统中.文件和程序的存在必须要有用户和组满足相应的存在需求

第六列:文件或目录所属的组(属组)

第七列:文件或目录的大小

第八列:文件或目录的修改时间,默认为月、日、时、分

第九列:实际的文件名或目录名.需要注意的是,文件名不算文件的属性

Liunx文件类型及文件扩展名

​

文件及目录查找命令

file****:显示文件的类型

[root@grape tmp]# file /tmp/test1.ext /tmp /dev/vhci /dev/sda /dev/log /dev/rtc 
/tmp/test1.ext: ASCII text
/tmp:           sticky directory
/dev/vhci:      character special
/dev/sda:       block special
/dev/log:       socket
/dev/rtc:       symbolic link to `rtc0'

which*****:显示命令的全路径

which命令查找的范围是PATH环境变量的路径

whereis****:显示命令及其相关文件全路径

whereis命令用于定位指定命令的可执行文件、源码文件及man帮助文件

locale****:快速定位文件路径

在Linux系统有一个名为mlocate.db的数据库文件,这个文件包含系统文件的文件名及对应的路径信息.所以,locate命令查找文件时不用遍历磁盘,而是直接查找mlocate.db文件,这样就可以快速给出结果.使用locate命令时先updatedb更新下mlocate.db数据库文件.当然,mlocate.db还会由系统自带的定时任务执行updatedb命令定期更新

• /var/lib/mlocate/mlocate.db 查找的数据库文件

• /etc/cron.daily/mlocate.cron 系统自带的定时任务脚本

• /etc/cron.daily/mlocate 系统自带的定时任务脚本

updatedb***:更新mlocate数据库

创建或更新locate命令使用的数据库.updatedb命令会被定时任务(每天)执行.

find*****:查找目录下的文件

# 1.查找指定时间内修改的文件
find . -atime -2  # 查找当前目录两天内被访问的文件

# 2.利用"!"进行反向查找
find . ! -type d

# 3.按照目录或文件的权限查找文件
find . -perm 755  # 755是权限的数字表示方式

# 4.按大小查找文件
find . -size +1000c  # 查找当前目录下文件大小大于1000字节的文件

# 5.查找文件时希望忽略某个目录
find /data -path "/data/dir1" -purne -o -print  # 参数-path用于指定路径样式,配合-purne参数用于排除指定目录
# -path "/data/dir1" -purne -o -print 是 -path "/data/dir1" -a -purne -o -print的简写,-a和-o类似于shell中的"&&"和"||",当-path "/data/dir1"为真时执行-prune,为假时执行-print

# 6.忽略多个目录
find /data \(-path /data/dir1 -o -path /data/dir2 \) -purne -o -print
# 使用圆括号可以将多个表达式结合在一起,但是圆括号在命令行中另有特殊含义,所以在此处使用"\"进行转义,即告诉bash不对后面的字符"()"作解析,而是留给find命令处理

# 7.使用nouser和user
chown nobody:nobody file1.txt
find . -user nobody  # 查找用户为nobody的文件

chown 555 file1.txt  # 修改为数字555
find . -nouser  # 查找数字属主就要使用-nouser参数,查找没有任何用户的文件

# 8.使用group和nogroup
find . -group nobody  # 查找用户组为nobody的文件

chown .555 file1.txt
find . -nogroup

# 9.查找某个文件新或旧的文件
find . -newer file1.txt ! -newer file2.txt  # 查找更改时间比file1新但比file2旧的文件

# 10.逻辑操作符
find . -maxdepth 1 -type d  # 查找一级目录,类似于tree -L 1
find . -maxdepth 1 -type d ! -name "." -o -name "ext" # 查找除"."意外的所有目录或文件名为ext的文件

# 11.find正则表达式的用法
语法 find -regextype "type" -regex "pattern"

# 12.ls -l命令放在dind命令的-exec选项中执行
find . -type f -exec ls -l {} \;  # 匹配当前目录下的所有普通文件,并在-exec选项中使用ls -l列出
详细说明:
-exec后面跟的是command命令,最后以分号(;)作为结束标志,考虑到各个系统中分号会有不同的意义,所以前面要加反斜杠对分号进行转义
{}的作用:指代前面find命令查找到的文件或目录
{}前后都要有空格

# 13.在目录中查找更改时间在n天以前的文件,并删除它们
find . -type f -mtime +n -exec rm {} \;

# 14.-exec的安全模式-ok
在删除或其他操作之前给出提示,这样操作会比较安全

# 15.对查找到的文件内容显示属性信息
find . -type f|xargs ls -l  # xargs是一个命令,是向其他命令传递参数的一个过滤器

# 16.使用xargs执行mv命令
find . -type f -name "*.txt"|xargs -i mv {} /tmp  # -xargs的-i参数,使得{}代表find查找到的文件,将这些文件以参数的形式放在mv命令后面,作为移动的源文件,移动到/tmp目录下

# 17.find结合xargs的-p选项的示例
find dir2 -name "file*"|xargs -p rm -f  # 使用xargs的-p参数会提示让你确认是否执行后面的命令

# 18.技巧性范例
find /root/data -name "test.txt"|xargs rm -f
find /root/data -name "test.txt" -exec rm -f {} \;

# 19.在oldboy目录及其子目录下的所有以扩展名".sh"结尾的文件中,将包含"./hostlists.txt"的字符串替换为"../idctest_iplist"
sed -i "s#./hostlists.txt#../idctest_iplist/g" 文件名
-i:将替换结果写入到文件
s:s是替换模式
g:global全局替换

find /oldboy -name "*.sh" -exec sed -i "s#./hostlists.txt#../idctest_iplist/g" {} \;
find /oldboy -name "*.sh"|xargs sed -i "s#./hostlists.txt#../idctest_iplist/g"
高效处理方法,优先处理反引号中的命令
"s#./hostlists.txt#../idctest_iplist/g" `find /oldboy -name "*.sh"`

# 20.将etc下所有的普通文件打包成压缩
find /etc -type f -exec tar zcvf test.tar.gz {} \;
find /etc -type f|xargs tar zcvf test.tar.gz
tar zcvf test.tar.gz `find /etc -type f`

# 21.删除一个目录下的所有文件名单保留一个文件
touch test{1..10}.txt
find . -type f ! -name "test10.txt"|xargs rm -f (推荐方法)
find . -type f ! -name "test10.txt"|-exec rm -f {} \; (文件多时效率低)
使用rsync
mkdir /null  # 建立一个空目录用于rsync删除文件使用
[root @mango xx]# rsync -az --delete --exclude "test10.txt" /null /xx

# 22.保留最近7天的访问日志
find /app/logs -type f -mtime +7 -name "*.log"|xargs rm -f
find /app/logs -type f -mtime +7 -name "*.log" -exec rm -f {} \;
find /app/logs -type f -mtime +7 -name "*.log" -delete
CustomLog "|/usr/local/sbin/cronlog /app/logs /access_www_%w.log" combined

find命令结合xargs与-exec的区别

xargs****:将标准输入转换成命令行参数

xargs < test.txt # 将所有数字变成一行,注意xargs不能直接接文件,需要结合重定向符"<"
xargs -n 3 < test.txt  # 每行最多输出3个

echo splitXsplitXsplitXsplitXsplitXsplitX -d X -n 2
split split
split split
split split

假如有个hello world.txt文件
find . -type f -name "*.txt"|xargs rm  # 报错,xargs会误认为hello world.txt是两个文件
正确语法
find . -type f -name "*.txt" -print0|xargs -0 rm  # 以字符null分隔输出

tar*****:打包压缩命令

打包软连接文件示例
tar zcf local.tar.gz /etc/rc.local  # 不指定h参数打包之后的文件将是个软连接文件么不是rc.local实体内容,查看文件内容为空

tar zcfh local.tar.gz /etc/rc.local  # 指定h参数打包,得到rc.local的实体内容

date*****:显示与设置系统时间

date +%F -d "-2day"  # 前天
date +%F -d "+2day"  # 后天
+表示未来,-表示过去,day表示日,year表示年,month表示月

时间格式转换
date -d "Sun 12 Jan 2020 06:50:03 PM CST" "+%Y-%m-%d %H:%M:%S"

date -d "Sun Jan 12 11:17:02 UTC 2020" "+%Y-%m-%d %H:%M:%Sdate -s "20200523 07:18:54"

date -s "20200523 07:18:54"

Linux文件核心属性知识

用户和用户组

用户

• UID(User Identify):用户ID,相当于身份证,在系统中是唯一的
• GID(Group Identify):组ID,相当于家庭住址

• 生产环境中,一般禁止root账号通过SSH远程连接服务器,也会更改默认的SSH端口.
• 在企业工作中,应该尽量在普通用户下操作任务.
• 普通用户仅具备操作自己家目录中的文件及目录的权限,可以进入或浏览相关目录(/etc、/var/log),但是无法创建、修改和删除任何文件
• 虚拟用户是系统正常运行必不可少,主要是为了方便系统管理,满足相应的系统进程对文件属主的要求.例如,系统默认的bin、adm、nobody、mail用户等

用户组

• 具有相同特征的用户(user)集合
• 将用户分组是Linux系统中对用户进行管理及控制访问权限的一种手段

用户和用户组的对应关系

• 一对一:一个用户可以存在一个组中,也可以是组中的唯一成员(root)
• 一对多:一个用户可以存在于多个用户组中
• 多对一:多个用户可以存在于一个组中,这些用户具有与组相同的权限
• 多对多:多个用户可以存在于多个组中,并且几个用户可以归属于相同的组

创建用户及用户组

useradd maomao  # 添加用户maomao,会默认创建一个maomao用户组,默认属于与用户同名的组

[root@grape ~]# id maomao  查看maomao用户、组及ID信息
uid=1001(maomao) gid=1001(maomao) groups=1001(maomao)

[root@grape ~]# su - maomao  切换到maomao用户
[maomao@grape ~]$  # 提示符变为了$

[maomao@grape ~]$ pwd  # 当前所在位置是在用户家目录
/home/maomao
[maomao@grape ~]$ touch test.txt  # 创建文件
[maomao@grape ~]$ ll
total 0
-rw-rw-r--. 1 maomao maomao 0 May 23 07:57 test.txt  # 目录/文件默认属于创建它的用户和组

文件生成一定是由用户创建,因此文件也必须要属于一个用户及组,默认就是属于创建它的用户和组

文件权限说明

rwxr-xr-x root root test.txt  # 每3个字符分为一组

• 属主权限位:rwx

• 属组权限位:r-x

• 其他用户权限位:r-x

• r、w、x、"-"的含义

  • r(read):可读权限,对应数字4
  • w(write):可写权限:对应数字2
  • x(Execute):可执行权限:对应数字1
  • "-"没有任何权限:对应数字0

• 还会有一些特殊的权限位t、T、s、S、X、x、+

索引节点

Linux磁盘存储数据的描述

1. 磁盘要存储数据,相当于盖房子住人
2. 磁盘要分区才能存储数据
3. 格式化磁盘,创建文件系统存储数据
4. 挂载到指定目录(挂载点)存放数据

索引节点详细说明

• 索引节点(Index node,Index)在每个Linux存储设备(磁盘或硬盘)或存储设备的分区(此时的存储设备可以是硬盘、软盘、U盘等等)中被格式化为ext系列文件系统之后,都会生成两部分内容:第一部分是Inode(默认大小为128或256字节),第二部分是block(默认大小为1~4KB).由于磁盘或分区一般比较大,因此,Inode和Block都会存在很多个,并且都可以存放数据信息

• Inode本质上是一小块具备唯一数字编号的存储空间,主要用来存放文件(目录)属性(例如ls -l的结果)的数据信息,注意,Inode里面唯独不包含文件名本身(文件名不算文件的属性)

• Block成为磁盘块,是用来存放实际数据的实体单元(ext文件系统一般最大为4KB),即用来存放真正的数据,例如,照片、视频等普通文件,单个的大文件需要占用多个Block块来存储,特别小的单个文件如果不能占满整个Block块,那么剩余的空间也无法再利用

• Inode存储的属性信息(即ls -l的结果),包括但不限于文件大小,属主(用户)、归属的用户组、文件权限、文件类型、"修改"时间等,还包含指向文件的实体指针等(Block的位置,即Inode节点与Block的对应关系)

Inode与Block的关系

• Inode除了要记录文件属性的信息之外,还会为每个文件进行信息索引,所以就有了Inode数值.操作系统根据指令,即可以通过Inode的值最快速地找到相对应的文件实体

Inode与Block的特点

1. Inode特点
   • ext3/ext4文件系统(CentOS5.x/6.x默认的文件系统)下,一个非空文件有且只有一个Inode和至少一个Block
   • Inode节点相同的文件,互为硬链接文件,可以认为是一个文件的不同入口
   • Inode在某一文件系统(分区)内是唯一的
2. Block特点
   • 磁盘读取数据是以Block为单位进行读取的
   • 每读取一个Block就会消耗一次磁盘I/O
   • 若文件比较大,那么一个文件可能占用多个Block
   • 若文件比较小,那么一个Block的剩余空间会被浪费,无论内容有多小

查看Inode和Block

[root@grape tmp]# df -i
Filesystem                Inodes IUsed    IFree IUse% Mounted on
/dev/mapper/centos-root 26214400 84355 26130045    1% /
devtmpfs                  229861   392   229469    1% /dev
tmpfs                     232903     1   232902    1% /dev/shm
tmpfs                     232903   743   232160    1% /run
tmpfs                     232903    16   232887    1% /sys/fs/cgroup
/dev/sda1                 524288   327   523961    1% /boot
/dev/mapper/centos-home 24637440  5143 24632297    1% /home
tmpfs                     232903     1   232902    1% /run/user/0

[root@grape tmp]# df -h  # Block是存放数据的位置,数据实体
Filesystem               Size  Used Avail Use% Mounted on
/dev/mapper/centos-root   50G  2.2G   48G   5% /
devtmpfs                 898M     0  898M   0% /dev
tmpfs                    910M     0  910M   0% /dev/shm
tmpfs                    910M   18M  893M   2% /run
tmpfs                    910M     0  910M   0% /sys/fs/cgroup
/dev/sda1               1014M  146M  869M  15% /boot
/dev/mapper/centos-home   47G  303M   47G   1% /home
tmpfs                    182M     0  182M   0% /run/user/0

磁盘空间满了故障总结

1. Block耗尽的情况:500G的磁盘存放400G+200G的视频
   • 使用df -h查看Block使用信息
2. Inode耗尽的情况:产生了大量的小文件(小于1kb)
   • 使用df -i查看Inode使用信息

硬链接及软链接数

链接的概念

• 在Linux系统中,链接可分为两种:一种为硬链接(Hard Link),另一种为软链接(Soft Link)或符号链接(Symbolic Link)
• 默认不带参数的情况下,ln命令创建的链接式硬链接
  • ln 原始文件 目标文件
• 如果是ln -s创建的链接,则为软链接,软链接文件的文件类型为l
  • ln -s 原始文件 目标文件(目标文件不能事先存在)

硬链接

• 硬链接是指通过索引节点(Inode)进行的链接.在CentOS6及以前的Linux(ext2、ext3、ext4)默认文件系统中,存在于磁盘分区中的文件都会分配一个唯一的编号,这个标号就称为索引节点编号(Index Inode),在Linux同一文件系统中该编号是唯一的
• Linux系统中,多个文件名指向同一个索引节点(Inode号相同)是正常且被允许的.这种情况下的两个文件就称作互为硬链接文件,本质上就是相同文件的两个名字.在同一个分区/文件系统中,Inode号相同的文件一定是硬链接文件
• 硬链接文件相当于是原始文件的另一个访问入口.作用之一是允许一个文件拥有多个有效的文件名(多个访问入口,类似超市的多个入口),这样用户就可以建立硬链接到重要文件上,为避免"误删"源数据加一份保险(快照功能)
• 文件系统(ext)的原理是,只要文件的索引节点(Inode Index)还有一个以上的硬链接,那么,只删除其中的一个硬链接(即仅仅删除了该文件的链接指向)并不会影响索引节点本身和其他的链接(即数据文件实体并未删除),只有在文件的最后一个硬链接被删除后,此时如果有新数据要存储到硬盘上,或者系统通过类似的fsck做磁盘检查的时候,被删除文件的数据块及目录的链接才会被释放,空间被新数据占用并覆盖.数据也就无法被找回
• 也就是说,在Linux系统中,删除静态文件(没有进程调用的文件)的条件是与之相关的所有硬链接文件均被删除.一个静态文件被彻底删除的条件就是该文件的硬链接数量为0

小结:

• 具有相同Inode节点号的多个文件互为硬链接文件,本质上是相同文件的不同文件名
• 删除硬链接文件或者源文件任意之一,文件实体并未被删除
• 只有删除了源文件及源文件对应的所有硬链接文件,文件实体才会被删除
• 待所有的硬链接文件及源文件均被删除后,再存放新的数据时,新数据会占用这个文件的空间.磁盘进行fsck检查的时候,删除的数据就会被系统回收
• 硬链接文件就是文件的另一个入口
• 可以通过对文件设置硬链接文件,来防止重要文件被误删
• 通过执行命令"ln 源文件 硬链接文件",即可完成硬链接的创建
• 硬链接就是普通文件
• 对于静态文件(没有进程正在调用的文件)来讲,当对应的硬链接数为0(i_link)时,文件就被删除.查看方式为ls -lhi
• 创建硬链接只能针对文件,不能是目录

image-20200113092153032.png

软链接

• 软链接(Soft Link)也称为符号链接(Symbolic Link,symlink).Linux中的软链接类似于windows系统中的快捷方式.软链接文件实际是一个特殊的文件,文件类型用字母l表示.可以将它理解为一个文本文件,这个文件中包含有软链接,其指向的是另一源文件的位置信息内容,因此,访问这个"快捷方式"就可以迅速定位到软链接所指向的源文件实体
• 软链接创建的方式为:ln -s 源文件 软链接文件
• 要想创建软链接,那么目标文件是不能存在的
• 软链接文件通过自身的Inode(存放原始文件路径信息,而不是读取Block),读到了软链接信息,并指向了原始文件,进而读到原始文件名,以及原始文件的Inode,再通过原始文件的Inode读到原始文件的内容(Block),这就是访问软链接文件来读取数据的原理
• 早期的软链接是读取自己的Block以获取原始文件的路径信息,但是这样的访问方式效率很低,对于Linux系统来说,有一种更好的方法,成为fastsymlinks,原理就是软链接的Block不存放源文件位置了,而是直接将源文件位置存放在Inode里面,即省事又快捷

image-20200113091715319.png

[root@grape tmp]# ll -i
硬链接 67919040 -rw-r--r--. 2 root root    16 Jan 13 08:51 music_hard.txt
软链接 67160667 lrwxrwxrwx. 1 root root     9 Jan 13 08:50 music_soft.txt -> music.txt
原始文件 67919040 -rw-r--r--. 2 root root    16 Jan 13 08:51 music.txt
 
软链接文件的Inode和文件类型都是不同的,软链接文件是单独的文件
 
[root@grape tmp]# readlink music_soft.txt 查看软链接文件的指向
music.txt

[root@grape tmp]# rm f music.txt  删除原始文件
[root@grape tmp]# cat music_soft.txt 
cat: music_soft.txt: No such file or directory  直接报错

软链接会出现底闪烁故障
67160667 lrwxrwxrwx. 1 root root     9 Jan 13 08:50 music_soft.txt -> music.txt

小结:

• ln命令不能对目录创建硬链接,但可以对目录创建软链接
• 软链接类似于Windows的快捷方式(通过readlink查看其指向)
• 软链接类似于一个文本文件,里面存放的是源文件的路径,指向源文件的实体
• 删除源文件,软链接文件依然存在,但是无法访问指向源文件路径的内容
• 失效的时候一般是红底白字闪烁
• 执行命令"ln -s 源文件 软链接文件",即可完成软链接的创建(目标不能存在)
• 软链接和源文件是不同类型的文件,也是不同的文件,Inode号也不相同
• 软链接文件的文件类型为字母(l)
• 软链接不仅针对文件,还可以针对目录

软链接与硬链接的区别

1. 答分类:Linux系统中,链接可分为两种,一种称为硬链接(Hard Link),另一种称为符号链接(Symbolic Link)或软链接(Soft link)
2. 答概念:硬链接与源文件的Inode节点号相同,而软链接文件则相当于Windows下的快捷方式(Inode节点号与源文件不同)
3. 答创建:默认不带参数的情况下,ln命令创建的是硬链接,带-s参数创建的是软链接
4. 答特点:
   • 不能对目录创建硬链接,但可以创建软链接
   • 软链接可以跨文件系统,硬链接不能跨文件系统
   • 删除软链接文件,对源文件以及硬链接文件无任何影响
   • 删除文件的硬链接文件,对源文件及软链接文件无任何影响
   • 删除链接文件的源文件,对硬链接文件无影响,会导致其软链接失效(红底白字闪烁)
   • 同时删除源文件及其硬链接文件,整个文件才会被"真正"删除
5. 答案例:硬链接用处不多,可以用来对重要文件做快照以防误删,对目录建立软链接在工作中很常用

Linux系统文件删除原理

1.从ext文件系统的角度

• Linux系统上的文件名是存储在父目录的Block里面的,并指向了这个文件的Inode节点,这个文件的Inode节点再标记指向存放这个文件的Block的数据块.在删除一个文件时,实际上并不会清除Inode节点和Block的数据.只是在这个文件的父目录中的Block里,删除这个文件的名字,从而使这个文件消失,并且无法指向这个文件的Inode节点.当没有文件名指向这个Inode节点的时候,释放Inode节点和存放这个文件数据的Block块会同时进行,并且会更新Inode MAP和Block MAP,以便让这些位置用于存放其他文件数据

2.从文件引用的角度

• Linux系统是通过Link的数量来控制文件是否被删除,只有当一个文件不存在任何Link的时候,这个文件才会被删除.一般来说,每个文件都有2个计数器,即i_count和i_nlink
• i_nlink就是文件硬链接的数量,i_nlink可以理解为磁盘的引用计数器;i_count就是当前文件使用者(例如,被进程调用)的数量,i_count可以理解为内存的引用计数器.当为文件创建硬链接的时候,对应的i_nlink的数量就会增加,而当一个文件被某一个进程调用时,对应i_count的数量就会增加
• 通过rm删除命令删除文件,实际就是减少文件的磁盘引用计数i_nlink的数量
• 在用户执行rm操作删除文件之后,再执行ls或者其他文件管理命令,将会无法再找到这个文件,但是调用这个被删除文件的进程却在继续正常执行,依然能够从文件中正确地读取及写入内容
• 这是因为rm操作只是将文件的i_nlink数减少了,如果没有其他的链接,i_nlink就位0;但是由于该文件依然在被进程调用,因此,此时文件对应的i_count并不为0,所以即使执行了rm操作,但系统没有真正删除这个文件,因此该文件还会占用磁盘空间,只有当i_nlink及i_count都为0的时候,这个文件才会真正被删除.也就是说,还需要解除该进程对该文件的调用,被删除的文件才会真正被删除
• 当文件没有被进程调用时进行删除,也可以找回文件数据.先是将文件名到Inode的链接删除了,此时,并没有删除文件的实体即Block数据块,如果及时停止机器工作,数据还是可以找回的,但如果此时继续写入数据,那么新的数据可能就会被分配到被删除数据的Block数据块了,此时,文件就是被真正地回收了

image-20200113112251317.png

chattr***:改变文件的扩展属性

chattr +a 文件名
chattr +i 文件名

lsattr***:查看文件扩展属性

Linux通配符与特殊符号知识

通配符符号集合

路径和位置相关特殊符号

不同引号特殊符号

其他特殊符号

Bash中的逻辑操作符

基本正则表达式集合

扩展正则表达式

预定义特殊中括号

元字符表达式

sed*****:流编辑器

常用参数选项

常用内置命令字符

# 示例
1.输出文件的第2-3行内容
sed -n '2,3p' 文件名

2.过滤出含有mango的字符
sed -n '/mango/p' 文件名  # 需要用双斜线将需要过滤的字符串包含在中间

3.删除含有mango字符串的行
sed '/mango/d' 文件名  # 如果需要修改文件,则要用-i参数

4.删除指定的行
sed '3d' 文件名
sed '5,8d' 文件名  # 删除第5~8行

5.将mango字符串全部替换为apple
sed -i 's#mango#apple#g' 文件名  # s表示替换模式,g表示全局替换

6.将mango字符串全部替换为apple,同时将1替换为2
sed -e 's#mango#apple#g' -e 's#1#2#g' 文件名

7.在文件的第二行追加文本
sed -i '2a hello,world' 文件名

8.在文件的第二行插入文本
sed -i '2i hello,world' 文件名

9.在文件的第二行插入两行文本
sed -i '2i hello,world\nhow are u' 文件名

10.1读取ifconfig中的第二行ip地址
ifconfig |sed -n '2s#^.*inet##gp'|sed -n 's#netm.*$##gp'  # '##'表示替换为空,然后输出剩下的字符

10.2
ifconfig -ne '2s#^.*inet##gp' -ne 's#netm.*$##gp'

10.3
ifconfig |sed -rn '2s#^.*inet (.*) netm.*$#\1#gp'  # \r表示支持扩展的正则表达式

awk*****:Linux最强大的文本处理工具

awk常用功能

序号	awk命令常用参数	简要例子说明
1	指定分隔符显示某几列	awk -F "GET|HTTP" '{print $2}' access.log直接获取显示出日志文件的url这一列
2	通过正则表达式取出想要获取的内容	awk '11}' /var/log/secure分析生产环境中的日志找出谁在破解用户密码
3	显示某个范围内的内容	awk 'NR==20,NR==30' filename显示文件的20到30行
4	通过awk进行统计计算	awk '{sum+=$0}END{print sum}' ett.txt进行总计算(高级功能)
5	awk数组计算与去重	awk '{array[$1]++}END{for (key in array) print key,array[key]}' access.log 对日志进行统计与计数(高级功能)

awk命令的参数

awk常见变量及属性

1.1 取test.txt文件的第2行和第3行的内容
awk "NR==2,NR==3" test.txt

1.2 
awk "NR>1&&NR<4" test.txt

2. 过滤出含有root字符串的行
awk '/root/' test.txt

3.删除含有root字符串的行
awk '/^[^root]/' test.txt

4.取文件的第一列、第三列和最后一列的内容,并打印行号
awk -F ":" '{print NR,$1,$3,$NF}' test.txt

5.取出linux中执行ifconfig的对应ip地址
ifconfig|awk 'NR==2{print $2}'  # CentOS7
ifconfig|awk -F "[: ]+" 'NR==2{print $4}'  # CentOS6
ifconfig|awk -F "(addr:)|  (Bcast:)" 'NR==2{print$2}' # CentOS6 以括号中的内容做分隔,|表示匹配左边或右边.即将左边"addr:"或右边"  Bcast"做分隔符

6.过滤文件中第一列的内容所匹配的root字符串,将符合条件的最后一列输出
awk -F ":" '/root/ {print $NF}' test.txt