如何用 awk sed 命令统计一个 Unix/Linux 系统中文件大小的分布情况?
admin
2024-02-10 03:16:28
0

前言

        测试过程中,将操作系统的结果差异性考虑其中。

问题

SoftwareTeacher看了《Unix 传奇》一书,想起很久以前读 Unix 文件系统设计思想的时候,里面提到Unix 的很多文件大小在 4K 以下。他提了一个问题

“怎么能用Unix 的awk, sed 和其它 shell 命令统计出你当前 Unix/Linux 系统上 所有文件大小的分布情况? (小于1K, 1K - 4K, 4K - 1M, 1M - 10M, 10M - 1G, 1G 以上)”

下面是基本实现思路:

  1. 使用命令列出目录下的所有文件信息
  2. 使用命令过滤出文件名和文件大小的列
  3. 使用命令统计不同文件大小的个数并计算百分比打印
  4. 使用管道把上述1/2/3组合起来

下面意义对这四步进行分解

一  使用命令列出目录下的所有文件信息

ls -Rla
lkmao@ubuntu:~/01$ ls -Rla
.:
总用量 40
drwxrwxr-x  3 lkmao lkmao 4096 11月 23 13:35 .
drwxrwxr-x 57 lkmao lkmao 4096 11月 23 13:34 ..
-rwxrwxr-x  1 lkmao lkmao 9208 11月 23 13:18 a.out
-rw-rw-r--  1 lkmao lkmao  732 11月 23 10:00 file.c
-rw-rw-r--  1 lkmao lkmao  662 11月 22 22:28 fork.c
-rw-rw-r--  1 lkmao lkmao 4642 11月 23 13:25 hello.txt
drwxrwxr-x  2 lkmao lkmao 4096 11月 23 13:35 test./test:
总用量 12
drwxrwxr-x 2 lkmao lkmao 4096 11月 23 13:35 .
drwxrwxr-x 3 lkmao lkmao 4096 11月 23 13:35 ..
-rw-rw-r-- 1 lkmao lkmao    6 11月 23 13:35 1.txt
lkmao@ubuntu:~/01$

 

二 使用命令过滤出文件名和文件大小的列

使用awk命令找出第5列和第9列。从结果看,其中有空格存在。

lkmao@ubuntu:~/01$ ls -Rla | awk '{print $9,$5}'. 4096
.. 4096
a.out 9208
file.c 732
fork.c 662
hello.txt 4642
test 4096. 4096
.. 4096
1.txt 6
lkmao@ubuntu:~/01$

三 使用sed命令删除空行 

这个依然需要分解为几部

1 将命令ls和awk的执行结果输出到一个文件2.txt中

2 使用sed -i 将该文件中的空格,点号,Tab键删除

3 过滤掉结果中的目录

3 使用cat查看2.txt文件

ls -Rla | awk '{print $9,$5}' > 2.txt
lkmao@ubuntu:~/01$ cat 2.txt. 4096
.. 4096
2.txt 0
a.out 9208
file.c 732
fork.c 662
hello.txt 4642
test 4096
xixi.sh 258. 4096
.. 4096
1.txt 6
lkmao@ubuntu:~/01$ 

 查看更新后的2.txt

lkmao@ubuntu:~/01$ cat 2.txt
. 4096
.. 4096
2.txt 0
a.out 9208
file.c 732
fork.c 662
hello.txt 4642
test 4096
xixi.sh 258
. 4096
.. 4096
1.txt 6
lkmao@ubuntu:~/01$ 

从结果中可知,有当前目录"." 和父目录".."这两个也需要删掉

打印2.txt中以点号"."开头的行:

lkmao@ubuntu:~/01$ sed -n '/^\./p' 2.txt
. 4096
.. 4096
. 4096
.. 4096
lkmao@ubuntu:~/01$

删除2.txt中以点号"."开头的行:

lkmao@ubuntu:~/01$ sed -i '/^\./d' 2.txt
lkmao@ubuntu:~/01$ cat 2.txt
2.txt 0
a.out 9208
file.c 732
fork.c 662
hello.txt 4642
test 4096
xixi.sh 258
1.txt 6
lkmao@ubuntu:~/01$

使用wc -l数行数,验证结果是否正确:如下所示,两种验证结果相同。

lkmao@ubuntu:~/01$ ls -ls | wc -l
8
lkmao@ubuntu:~/01$ cat 2.txt | wc -l
8
lkmao@ubuntu:~/01$

 

四 使用命令统计不同文件大小的个数并计算百分比打印

这一步直接使用前三步的成果2.txt文件。虽然有

验证1:xixi.sh

验证目标:输出小于100字节的文件名字和大小

cat 2.txt | awk '
BEGIN{size[0]="0-100"tatol=0
}
($2 <= 100){a[0]++}
($2 <= 100){print "size[i]","name:",$1,"size:",$2}
{total++
}
END{for(i=0;i

执行结果:使用source执行文件,从执行结果可知,找到了1.txt和2.txt,但是,这不是我们想要的结果。需要重写。

lkmao@ubuntu:~/01$ source xixi.sh
size[i] name: 2.txt size: 0
size[i] name: 1.txt size: 6
0-100 file count:2 percent: 25 %
lkmao@ubuntu:~/01$

验证2:xixi.sh

测试的时候,删除其他的.txt文件。然后中间文件放到了父目录中

ls -RlA | awk '{print $9,$5}' > ../4.txt
sed -i '/^[ \t]$/d' ../4.txt
cat ../4.txt | awk 'BEGIN{size[0]="0-100"tatol=0
}
($2 <= 100){a[0]++}
($2 <= 100){print "size[i]","name:",$1,"size:",$2}{total++}END{for(i=0;i

测试结果:

lkmao@ubuntu:~/01$ source xixi.sh
size[i] name: 1.txt size: 6
0-100 file count:1 percent: 14.2857 %
lkmao@ubuntu:~/01$

验证3:xixi.sh

计算小于1024字节和大于1024字节的文件个数和占比:

#!/bin/bash
ls -RlA | awk '{print $9,$5}' > ../4.txt
sed -i '/^[ \t]$/d' ../4.txt
cat ../4.txt | awk 'BEGIN{size[0]="0-1024"size[1]=">1024"tatol=0
}
($2 <= 1024){a[0]++}
($2 > 1024){a[1]++}{total++}END{for(i=0;i
lkmao@ubuntu:~/01$ source xixi.sh
0-1024 file count:4 percent: 57.1429 %
>1024 file count:3 percent: 42.8571 %
lkmao@ubuntu:~/01$

小结

相关内容

热门资讯

安卓系统的几大组件,组件架构与... 你有没有发现,你的安卓手机里藏着许多神奇的“小精灵”呢?它们默默无闻地工作,让你的手机变得如此强大和...
安卓系统关闭app流量,轻松关... 手机里的APP们是不是有时候让你觉得流量消耗得有点儿太快了呢?别急,今天就来教你几招,让你的安卓手机...
安卓系统无尽之海,安卓系统中的... 安卓系统,无尽之海中的航行者想象你正站在一望无际的海洋边,海风轻拂,波光粼粼。这片海洋,深邃而神秘,...
苹果系统用安卓主题,安卓主题完... 你有没有想过,把苹果系统的简洁优雅和安卓的丰富个性结合起来呢?想象你的iPhone界面突然变得五彩斑...
ios系统和安卓系统的体验,系... 你有没有发现,现在手机市场上两大巨头——iOS系统和安卓系统,就像是一对双胞胎,各有各的特色,让人挑...
安卓刷机Linux系统,深度解... 你有没有想过,你的安卓手机其实可以变身成一个强大的Linux系统?没错,就是那个让无数程序员为之疯狂...
安卓系统卫士那个好,哪款更胜一... 手机里的安卓系统卫士,就像是我们的私人保镖,时刻守护着我们的手机安全。那么,这么多卫士中,哪个才是最...
安卓手机互换苹果系统,跨界体验... 你有没有想过,把安卓手机换成苹果系统,会是怎样的体验呢?想象你的手机瞬间变身,从安卓的海洋跳进了苹果...
共享系统推荐安卓游戏,共享系统... 你有没有发现,最近手机里的游戏推荐越来越贴心了?没错,就是那个神奇的共享系统,它就像你的私人游戏顾问...
新疆安卓系统广告机,智能展示新... 新疆安卓系统广告机:数字时代的弄潮儿在数字化浪潮席卷全球的今天,智能手机已成为我们生活中不可或缺的一...
tissot怎么配对安卓系统,... 你有没有想过,一块手表不仅仅是一件饰品,更是一种时尚的宣言呢?Tissot,这个瑞士手表品牌,以其优...
苹果系统真的不如安卓,苹果系统... 你有没有想过,为什么苹果系统总是被捧得那么高,而安卓系统却总是被说成“不如”呢?今天,咱们就来聊聊这...
安卓系统短信横幅关闭,享受清爽... 你是不是也和我一样,最近发现安卓手机的短信横幅功能有点烦人呢?每次收到短信,屏幕上就会飘来一条横幅,...
手机刷安卓11系统,系统革新与... 你有没有发现,最近你的手机好像变得有点不一样了?没错,就是那个一直默默陪伴你的安卓系统,它悄悄地升级...
安卓系统 漂移游戏下载,速度与... 你有没有想过,在手机上玩一款能让你心跳加速、手忙脚乱的游戏?今天,就让我带你走进安卓系统中的神秘世界...
安卓4修改系统语言,轻松切换多... 你有没有想过,手机里的语言设置竟然也能成为个性展示的小细节呢?没错,就是那个看似不起眼,实则能让你瞬...
安卓版pc端系统,跨越平台界限... 你有没有想过,你的安卓手机里的应用,竟然可以在电脑上无缝运行?没错,这就是安卓版PC端系统的魅力所在...
安卓7车机系统,科技与安全的完... 你有没有发现,现在的汽车越来越智能了?没错,我说的就是那些内置了安卓7车机系统的家伙们。想象当你坐在...
王者荣耀安卓系统区别,深度揭秘... 你有没有发现,玩王者荣耀的时候,安卓系统的手机和苹果系统的手机,感觉就像是两个不同的世界呢?今天,就...
盒子电视安卓9系统,畅享智能新... 亲爱的读者们,你是否曾为拥有一台功能强大、系统流畅的电视而心动?今天,我要给你介绍一款特别受欢迎的盒...