1、第一，用sort+uniq，注意，单纯uniq是不行的。第二，用sort+awk命令，注意，单纯awk同样不行，原因同上。第三，用sort+sed命令，同样需要sort命令先排序。
让客户满意是我们工作的目标，不断超越客户的期望值来自于我们对这个行业的热爱。我们立志把好的技术通过有效、简单的方式提供给客户，将通过不懈努力成为客户在信息化领域值得信任、有价值的长期合作伙伴，公司提供的服务项目有：国际域名空间、网页空间、营销软件、网站建设、花都网站维护、网站推广。
2、linux去重命令是什么呢？在介绍uniq命令之前，我们先来新建在下面的案例中需要用到的文件/tmp/uniq.txt，内容如下 默认情况下uniq只会检索相邻的重复数据从而去重。
3、用Sort命令对text文件中各行排序后输出其结果。请注意，在原文件的第三行上的第一个单词完全相同，该命令将从它们的第二个单词vegetables与fruit的首字符处继续进行比较。
在linux中grep命令是非常有用的，它和管道(|)配合使用，非常强大，用于搜索文本文件.如果想要在几个文本文件中查找一字符串，可以使用‘grep’命令。‘grep’在文本中搜索指定的字符串。
Linux grep 命令用于查找文件里符合条件的字符串。grep 指令用于查找内容包含指定的范本样式的文件，如果发现某文件的内容符合所指定的范本样式，预设 grep 指令会把含有范本样式的那一列显示出来。
grep -E word1|word2|word3 file.txt 满足任意条件（wordword2和word3之一）将匹配。
Linux系统中grep命令是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹 配的行打印出来。grep全称是Global Regular Expression Print，表示全局正则表达式版本，它的使用权限是所有用户。
Linux grep命令用于查找文件里符合条件的字符串。grep指令用于查找内容包含指定的范本样式的文件，如果发现某文件的内容符合所指定的范本样式，预设grep指令会把含有范本样式的那一列显示出来。
if($i~hello){sub([，.！]$，，$i)；print $i}} test testc目前只考虑到了单词后面可能含 逗号、句号、感叹号 的情况，把这些标点符号去除了。注意：test同时也是linux的一个命令。你看，被语法高亮了。
grep命令能够在一个或多个文件中，搜索某一特定的字符模式(也就是正则表达式)，此模式可以是单一的字符、字符串、单词或句子。
hello 1选项 -e 指定多个匹配样式： echo this is a text line | grep -e is -e line -o is line 1也可以使用 -f 选项来匹配多个样式，在样式文件中逐行写出需要匹配的字符。