【shell】Linux删除文本重复行

通常如果我们想获取一个文件里不重复的行的时候，我们可以直接通过sort-u命令，先把文件排序，然后去掉连续的重复行就行。

创新互联公司主营潼关网站建设的网络公司,主营网站建设方案,APP应用开发,潼关h5微信平台小程序开发搭建,潼关网站营销推广欢迎潼关等地区企业咨询

awk -F[-，] {for(i=1；i=NF；i++)a[$i，NR]++}{for(j in a){split(j，b，SUBSEP)；if(b[2]==NR)printf b[1] } printf \n} 关键词.txt 去除重复后.txt以此例测试通过。

启动Linux系统，用ssh工具（xshell或者SecureCRT等）连上Linux系统。在shell脚本启动时或者在脚本内都可以添加这些调试选项。测试脚本debug.sh，代码如图所示。在脚本启动时添加调试选项。

利用linux命令行进行文本按行去重并按重复次数排序linux命令行提供了非常强大的文本处理功能，组合利用linux命令能实现好多强大的功能。本文这里举例说明如何利用linux命令行进行文本按行去重并按重复次数排序。

两种思路，第一种，你打开文件，找到匹配的行，改掉，重写个文件，删除原来的。改这个文件为一样的名字。第二种，以需要改写的文本，把原来的文件分成两个部分，要改写的部分空出，然后重定向合并到一个文件里。

Linux删除文件夹命令?

1、Linux删除文件夹命令是rmdir。rmdir 使用权限：于目前目录有适当权限的所有使用者。使用方式：rmdir dirName。参数：－p是当子目录被删除后使它也成为空目录的话，则顺便一并删除。说明： 删除已建立的目录。

2、Linux删除文件的命令是rm命令。Linux rm命令用于删除一个文件或者目录。语法：rm [options] name...参数：-i 删除前逐一询问确认。-f 即使原档案属性设为唯读，亦直接删除，无需逐一确认。

3、linux删除命令rm-rf命令。具体详情：rm命令在Linux下通常用来删除文件。rm-r命令递归的删除文件夹，甚至是空的文件夹。rm-f命令能不经过询问直接删除‘只读文件’。

Linux常用命令

1、01 linux常用命令有pwd命令、cd命令、ls命令、cat命令、grep命令、touch命令、cp命令、mv命令、rm命令、rmdir命令等。linux常用命令： pwd命令 该命令的英文解释为print working directory(打印工作目录)。

2、linux常用命令及用法包括登陆、重启、关机、添加／删除用户、切换用户等。登陆 ＃和＄ ＃表示为root用户，＄表示普通用户。

3、linux常用命令如下：查看内核版本：uname -a。控制台-》图形界面：init 5或者startx。图形界面-》控制台： init3或者直接注销。如何查看ip地址：ifconfig。配置ip：ifconfig eth0 ip地址。

4、ls是英文单词list的简写，其功能为列出目录的内容，是用户最常用的命令之一，它类似于DOS下的dir命令。

5、在Linux中，ls命令是最常使用的命令之一，因为在命令行下要随时查看目录内容。