linux命令对某一列去重/统计

1、默认情况下uniq只会检索相邻的重复数据从而去重。在/tmp/uniq.txt中虽然“onmpw web site” 有三条，但是其中一条是和其他两条不相邻的，所以只去重了一条，同理“error php function”也是这种情况。

成都网站建设哪家好，找创新互联公司！专注于网页设计、成都网站建设、微信开发、微信小程序开发、集团成都定制网站等服务项目。核心团队均拥有互联网行业多年经验，服务众多知名企业客户；涵盖的客户类型包括：玻璃贴膜等众多领域，积累了大量丰富的经验，同时也获得了客户的一致认可！

2、主要用到的命令有sort，uniq和cut。其中，sort主要功能是排序，uniq主要功能是实现相邻文本行的去重，cut可以从文本行中提取相应的文本列(简单地说，就是按列操作文本行)。

3、Linux uniq命令用于检查及删除文本文件中重复出现的行列，一般与sort命令结合使用。uniq可检查文本文件中重复出现的行列。

4、在Linux系统里常用于文本查看、操作、统计的命令：通过多敲键盘，形成手感 肌肉记忆 ，熟练掌握这些命令，在以后生信分析中游刃有余。

linux文件行排序去重结果不同sort和uniq

1、执行sort filea |uniq -u |wc -l，先排序，则删除了c和b的行；执行sort -u filea |wc -l，排序，同时删除相同的行，则只删除c行。

2、默认情况下uniq只会检索相邻的重复数据从而去重。在/tmp/uniq.txt中虽然“onmpw web site” 有三条，但是其中一条是和其他两条不相邻的，所以只去重了一条，同理“error php function”也是这种情况。

3、(1)排序 由于uniq命令只能对相邻行进行去重复操作，所以在进行去重前，先要对文本行进行排序，使重复行集中到一起。

Linux文本操作常用命令

linux常用命令有pwd命令、cd命令、ls命令、cat命令、grep命令、touch命令、cp命令、mv命令、rm命令、rmdir命令等。linux常用命令： pwd命令 该命令的英文解释为print working directory(打印工作目录)。

linux基本操作命令如下：查看内核版本：uname -a。控制台-图形界面：init 5或者startx。图形界面-控制台： init3或者直接注销。如何查看ip地址：ifconfig。配置ip：ifconfig eth0 ip地址。

sudo：以超级用户权限执行命令。tar：打包和解压缩文件。这只是一部分常用的Linux命令，还有很多其他的命令和参数。建议您在学习和使用Linux时，查阅Linux操作系统的guan 方文档和相关教程，以便更好地掌握Linux命令的使用。

Linux常用基本命令主要包括目录操作命令、文件操作命令、文件查看命令、磁盘管理命令、用户管理命令、系统管理命令等。目录操作命令：cd、ls、mkdir、pwd、rmdir。

grep命令用于搜索文本文件中的特定字符串。tar命令用于创建和提取归档文件。ssh命令用于远程连接到其他计算机。总之，熟悉linux的常用命令可以大大提高工作效率。掌握更多的命令和技巧可以让用户更好地利用linux操作系统。

文章名称：linux命令去重并排序 linux shell去重
浏览地址：http://myzitong.com/article/depcgjg.html