uniq命令 – 去除文件中的重复行

Linux系统中有很多个用于查看文件内容的命令，每个命令又都有自己的特点，比如这个cat命令就是用于查看内容较少的纯文本文件的。cat这个命令也很好记，因为cat在英语中是“猫”的

echo命令用于在终端设备上输出字符串或变量提取后的值，这是在Linux系统中最常用的几个命令之一，但操作却非常简单。人们一般使用在变量前加上$符号的方式提取出变量的值，例如：$P

rmdir命令作用是删除空的目录，英文全称：“remove directory”。注意：rmdir命令只能删除空目录。当要删除非空目录时，就要使用带有“-R”选项的rm命令。rmdir命令的“-p”参数可

expr命令的英文全称是“expression”，即是表达式的意思，作用是一个命令行的计数器，常用于在UNIX/LINUX系统中求表达式变量的值，一般用于整数值，也可用于字符串。 语法格式：expr [

tail用于显示文件尾部的内容，默认在屏幕上显示指定文件的末尾10行。如果给定的文件不止一个，则在显示的每个文件前面加一个文件名标题。如果没有指定文件或者文件名为“-”，则

grep是“global search regular expression and print out the line”的简称，意思是全面搜索正则表达式，并将其打印出来。这个命令可以结合正则表达式使用，它也是linux使用最为

look指令用于英文单字的查询。您仅需给予它欲查询的字首字符串，它会显示所有开头字符串符合该条件的单字。 语法格式：look [参数] [字符串] [文件]常用参数：-a使用另一个字典文

uniq命令全称是“unique”，中文释义是“独特的，唯一的”。该命令的作用是用来去除文本文件中连续的重复行，中间不能夹杂其他文本行。去除了重复的，保留的都是唯一的，也就是独特的

tr的英文全称是“ transform ”，即转换的意思。该命令的作用是一种可将字符进行替换、压缩、删除，他可以将一组字符转换成另一组字符。tr他只能从标准输入中读取数据，因此，tr要

paste命令会把每个文件以列对列的方式，一列列地加以合并 ，他就是相当于把两个不同的文件内容粘贴在一起，形成新的文件。注意：paste默认粘贴方式以列的方式粘贴，但是并不是不能以

join的连接操作简言之就是将两个具有相同域的纪录给挑选出来，再将这些纪录所有的域放到一行。注意：join在对两个文件进行连接时，两个文件必须都是按照连接域排好序的，按其他域排

colrm命令的英文全称是“column remove”，即意为删除列，功能是从标准输入设备读取数据，转而输出到标准输出设备，如果不加任何参数，则该指令不会过滤任何一列。 语法格式： colrm[开

comm命令会一列列地比较两个已排序文件的差异，并将其结果显示出来，如果没有指定任何参数，则会把结果分成3行显示：第1行仅是在第1个文件中出现过的列，第2行是仅在第2个文件中出现

功能介绍：col命令的英文全称是“colation”，其中文释义就是“过滤”。该命令是一个标准输入文本过滤器，它从标注输入设备读取文本内容，并把内容显示到标注输出设备。 在许多UNIX

csplit命令的英文全称是“context split”，该命令用于将一个大文件分割成小的碎片，并且将分割后的每个碎片保存成一个文件。碎片文件的命名类似“xx00”，“xx01”。csplit命令

Linux sed 命令是利用脚本来处理文本文件。sed 可依照脚本的指令来处理、编辑文本文件。sed 主要用来自动编辑一个或多个文件、简化对文件的反复操作、编写转换程序等。语法

ed是Linux中功能最简单的文本编辑程序，一次仅能编辑一行而非全屏幕方式的操作。ed命令并不是一个常用的命令，一般使用比较多的是vi 指令。但ed文本编辑器对于编辑大文件或对于

rgrep命令的功能和grep命令类似，可查找内容包含指定的范本样式的文件，如果发现某文件的内容符合所指定的范本样式，预设rgrep命令会把含有范本样式的那一列显示出来。语法格式：rg

jed命令用于编辑文本文件。 jed是以Slang所写成的程序，适合用来编辑程序原始代码。 语法格式：jed [参数] [文件] 常用参数：-2显示上下两个编辑区 -batch以批处理模式来执行 -g

fold命令会从指定的文件里读取内容，将超过限定列宽的列加入增列字符后，输出到标准输出设备。若不指定任何文件名称，或是所给予的文件名为”-“，则fold指令会从标准输

fmt命令会从指定的文件里读取内容，将其依照指定格式重新编排后，输出到标准输出设备。若指定的文件名为”-“，则fmt指令会从标准输入设备读取数据。语法格式：fmt [参数

pico是个简单易用、以显示导向为主的文字编辑程序，它伴随着处理电子邮件和新闻组的程序pine而来。语法格式：pico [参数] [文件] 常用参数：-k预设pico在使用剪下命令时，会把光标

mtype为mtools工具命令，模拟MS-DOS的type命令，可显示MS-DOS文件的内容。 语法格式： mtype [参数] [文件]常用参数：-s去除8位字符码集的第一个位，使它兼容于7位的ASCII。-t将MS-DO

ispell预设会使用/usr/lib/ispell/english.hash字典文件来检查文本文件。若在检查的文件中找到字典没有的词汇，ispell会建议使用的词汇，或是让你将新的词汇加入个人字典。 语

spell可从标准输入设备读取字符串，结束后显示拼错的词汇。 语法格式： spell [字符串]参考实例检查testfile 拼写错误 ：[root@linuxcool ~]# spell testfile

let命令是bash中用于计算的工具，用于执行一个或多个表达式，变量计算中不需要加上 $ 来表示变量。如果表达式中包含了空格或其他特殊字符，则必须引起来。 语法格式： let[参数]参

tac命令就是将文件反向输出，刚好和cat输出相反。语法格式：tac [参数] [文件]常用参数：-b 在行前而非行尾添加分隔标志 -r 将分隔标志视作正则表达式来解析 -s 使用指定字符串代

rm是常用的命令，该命令的功能为删除一个目录中的一个或多个文件或目录，它也可以将某个目录及其下的所有文件及子目录均删除。对于链接文件，只是删除了链接，原有文件均保持不变。

head命令以行为单位，取文件的内容,后面不接参数时默认打印前10行。语法格式：head [参数] [文件]常用参数：-n后面接数字，代表显示几行的意思-c指定显示头部内容的字符数 -v总是显

有时候在写Shell脚本的时候需要一些临时存储数据的才做，最适合存储临时文件数据的位置就是/tmp，因为该目录中所有的内容在系统重启后就会被清空。tempfile命令只有在基于Debia