linux命令对某一列去重/统计

cat file.csv | awk -F '\t' '{print $2}'

公司主营业务：网站设计、做网站、移动网站开发等业务。帮助企业客户真正实现互联网宣传，提高企业的竞争能力。成都创新互联是一支青春激扬、勤奋敬业、活力青春激扬、勤奋敬业、活力澎湃、和谐高效的团队。公司秉承以“开放、自由、严谨、自律”为核心的企业文化，感谢他们对我们的高要求，感谢他们从不同领域给我们带来的挑战，让我们激情的团队有机会用头脑与智慧不断的给客户带来惊喜。成都创新互联推出祥云免费做网站回馈大家。

'\t'指的是file.csv不同列以'\t'分割，如果的是以其他符号分割，换成其她符号；

'{print $2}'是指取第2列，此处从1开始计数，第1列，第2列；

一般去重之前要进行排序

cat file.csv | awk -F '\t' '{print $2}' | sort | uniq

前半部分与命令1一样，后面加上| sort | uniq

比如通过命令2发现，第2列取值有两种，分别是'neg'和‘pos’，那么我想知道有多少行的第2列取值为'pos'，多少行的第2列取值为'neg'。

cat file.csv | awk -F '\t' '{print $2}' | grep -o 'neg'| wc -l

前半部分与命令1一样，后面加上 | grep -o 'neg'| wc -l

grep -o 'neg'就是取出取值为'neg'的行

wc -l 是计数有多少行

如何统计Linux中文件和文件夹/目录的数量

在本教程中，我们将向您展示如何使用多个命令，并使用 ls、egrep、wc 和 find 命令执行一些高级操作。 下面的命令将可用在多个方面。

为了实验，我打算总共创建 7 个文件和 2 个文件夹（5 个常规文件和 2 个隐藏文件）。 下面的 tree 命令的输出清楚的展示了文件和文件夹列表。

# tree -a /opt

/opt

├──magi

│ └──2g

│ ├──test5.txt

│ └──.test6.txt

├──test1.txt

├──test2.txt

├──test3.txt

├──.test4.txt

└──test.txt

2directories,7files

示例 1

统计当前目录的文件（不包括隐藏文件）。 运行以下命令以确定当前目录中有多少个文件，并且不计算点文件（LCTT 译注：点文件即以“.” 开头的文件，它们在 Linux 默认是隐藏的）。

# ls -l . | egrep -c '^-'

4

细节：

ls ： 列出目录内容

-l ： 使用长列表格式

. ： 列出有关文件的信息（默认为当前目录）

| ： 将一个程序的输出发送到另一个程序进行进一步处理的控制操作符

egrep ： 打印符合模式的行

-c ： 通用输出控制

'^-' ： 以“-”开头的行（ls -l 列出长列表时，行首的 “-” 代表普通文件）

示例 2

统计当前目录包含隐藏文件在内的文件。 包括当前目录中的点文件。

# ls -la . | egrep -c '^-'

5

示例 3

运行以下命令来计数当前目录的文件和文件夹。 它会计算所有的文件和目录。

# ls -l | wc -l

5

细节：

ls ： 列出目录内容

-l ： 使用长列表格式

| ： 将一个程序的输出发送到另一个程序进行进一步处理的控制操作符

wc ： 这是一个统计每个文件的换行符、单词和字节数的命令

-l ： 输出换行符的数量

Linux 命令 read （文件管理）——想玩转linux就请一直看下去

Linux read命令用于从标准输入读取数值。

read 内部命令被用来从标准输入读取单行数据。这个命令可以用来读取键盘输入，当使用重定向的时候，可以读取文件中的一行数据。

参数说明:

1、简单读取

测试结果为：

2、-p 参数，允许在 read 命令行中直接指定一个提示。

测试结果为：

3、-t 参数指定 read 命令等待输入的秒数，当计时满时，read命令返回一个非零退出状态。

执行程序不输入，等待 5 秒后：

4、除了输入时间计时，还可以使用 -n 参数设置 read 命令计数输入的字符。当输入的字符数目达到预定数目时，自动退出，并将输入的数据赋值给变量。

该例子使用了-n 选项，后接数值 1，指示 read 命令只要接受到一个字符就退出。只要按下一个字符进行回答，read 命令立即接受输入并将其传给变量，无需按回车键。

只接收 2 个输入就退出：

执行程序输入两个字符：

5、 -s 选项能够使 read 命令中输入的数据不显示在命令终端上（实际上，数据是显示的，只是 read 命令将文本颜色设置成与背景相同的颜色）。输入密码常用这个选项。

执行程序输入密码后是不显示的：

6.读取文件

每次调用 read 命令都会读取文件中的 "一行" 文本。当文件没有可读的行时，read 命令将以非零状态退出。

通过什么样的方法将文件中的数据传给 read 呢？使用 cat 命令并通过管道将结果直接传送给包含 read 命令的 while 命令。

测试文件 test.txt 内容如下：

测试代码：

执行结果为：

使用 -e 参数，以下实例输入字符 a 后按下 Tab 键就会输出相关的文件名(该目录存在的)：

linuxwc-l计数少一行

正常现象。linux下wc-l这个命令统计行数不包含最后一行没有回车的数据，因为wc–l是按作为行结束符统计行数，所以最后一行没有就会统计丢失。

文章题目：linux命令计数,Linux计数
转载注明：http://scyanting.com/article/hdjhjc.html