如何用 awk sed 命令统计一个 Unix/Linux 系统中文件大小的分布情况?
admin
2024-02-10 03:16:28
0

前言

        测试过程中,将操作系统的结果差异性考虑其中。

问题

SoftwareTeacher看了《Unix 传奇》一书,想起很久以前读 Unix 文件系统设计思想的时候,里面提到Unix 的很多文件大小在 4K 以下。他提了一个问题

“怎么能用Unix 的awk, sed 和其它 shell 命令统计出你当前 Unix/Linux 系统上 所有文件大小的分布情况? (小于1K, 1K - 4K, 4K - 1M, 1M - 10M, 10M - 1G, 1G 以上)”

下面是基本实现思路:

  1. 使用命令列出目录下的所有文件信息
  2. 使用命令过滤出文件名和文件大小的列
  3. 使用命令统计不同文件大小的个数并计算百分比打印
  4. 使用管道把上述1/2/3组合起来

下面意义对这四步进行分解

一  使用命令列出目录下的所有文件信息

ls -Rla
lkmao@ubuntu:~/01$ ls -Rla
.:
总用量 40
drwxrwxr-x  3 lkmao lkmao 4096 11月 23 13:35 .
drwxrwxr-x 57 lkmao lkmao 4096 11月 23 13:34 ..
-rwxrwxr-x  1 lkmao lkmao 9208 11月 23 13:18 a.out
-rw-rw-r--  1 lkmao lkmao  732 11月 23 10:00 file.c
-rw-rw-r--  1 lkmao lkmao  662 11月 22 22:28 fork.c
-rw-rw-r--  1 lkmao lkmao 4642 11月 23 13:25 hello.txt
drwxrwxr-x  2 lkmao lkmao 4096 11月 23 13:35 test./test:
总用量 12
drwxrwxr-x 2 lkmao lkmao 4096 11月 23 13:35 .
drwxrwxr-x 3 lkmao lkmao 4096 11月 23 13:35 ..
-rw-rw-r-- 1 lkmao lkmao    6 11月 23 13:35 1.txt
lkmao@ubuntu:~/01$

 

二 使用命令过滤出文件名和文件大小的列

使用awk命令找出第5列和第9列。从结果看,其中有空格存在。

lkmao@ubuntu:~/01$ ls -Rla | awk '{print $9,$5}'. 4096
.. 4096
a.out 9208
file.c 732
fork.c 662
hello.txt 4642
test 4096. 4096
.. 4096
1.txt 6
lkmao@ubuntu:~/01$

三 使用sed命令删除空行 

这个依然需要分解为几部

1 将命令ls和awk的执行结果输出到一个文件2.txt中

2 使用sed -i 将该文件中的空格,点号,Tab键删除

3 过滤掉结果中的目录

3 使用cat查看2.txt文件

ls -Rla | awk '{print $9,$5}' > 2.txt
lkmao@ubuntu:~/01$ cat 2.txt. 4096
.. 4096
2.txt 0
a.out 9208
file.c 732
fork.c 662
hello.txt 4642
test 4096
xixi.sh 258. 4096
.. 4096
1.txt 6
lkmao@ubuntu:~/01$ 

 查看更新后的2.txt

lkmao@ubuntu:~/01$ cat 2.txt
. 4096
.. 4096
2.txt 0
a.out 9208
file.c 732
fork.c 662
hello.txt 4642
test 4096
xixi.sh 258
. 4096
.. 4096
1.txt 6
lkmao@ubuntu:~/01$ 

从结果中可知,有当前目录"." 和父目录".."这两个也需要删掉

打印2.txt中以点号"."开头的行:

lkmao@ubuntu:~/01$ sed -n '/^\./p' 2.txt
. 4096
.. 4096
. 4096
.. 4096
lkmao@ubuntu:~/01$

删除2.txt中以点号"."开头的行:

lkmao@ubuntu:~/01$ sed -i '/^\./d' 2.txt
lkmao@ubuntu:~/01$ cat 2.txt
2.txt 0
a.out 9208
file.c 732
fork.c 662
hello.txt 4642
test 4096
xixi.sh 258
1.txt 6
lkmao@ubuntu:~/01$

使用wc -l数行数,验证结果是否正确:如下所示,两种验证结果相同。

lkmao@ubuntu:~/01$ ls -ls | wc -l
8
lkmao@ubuntu:~/01$ cat 2.txt | wc -l
8
lkmao@ubuntu:~/01$

 

四 使用命令统计不同文件大小的个数并计算百分比打印

这一步直接使用前三步的成果2.txt文件。虽然有

验证1:xixi.sh

验证目标:输出小于100字节的文件名字和大小

cat 2.txt | awk '
BEGIN{size[0]="0-100"tatol=0
}
($2 <= 100){a[0]++}
($2 <= 100){print "size[i]","name:",$1,"size:",$2}
{total++
}
END{for(i=0;i

执行结果:使用source执行文件,从执行结果可知,找到了1.txt和2.txt,但是,这不是我们想要的结果。需要重写。

lkmao@ubuntu:~/01$ source xixi.sh
size[i] name: 2.txt size: 0
size[i] name: 1.txt size: 6
0-100 file count:2 percent: 25 %
lkmao@ubuntu:~/01$

验证2:xixi.sh

测试的时候,删除其他的.txt文件。然后中间文件放到了父目录中

ls -RlA | awk '{print $9,$5}' > ../4.txt
sed -i '/^[ \t]$/d' ../4.txt
cat ../4.txt | awk 'BEGIN{size[0]="0-100"tatol=0
}
($2 <= 100){a[0]++}
($2 <= 100){print "size[i]","name:",$1,"size:",$2}{total++}END{for(i=0;i

测试结果:

lkmao@ubuntu:~/01$ source xixi.sh
size[i] name: 1.txt size: 6
0-100 file count:1 percent: 14.2857 %
lkmao@ubuntu:~/01$

验证3:xixi.sh

计算小于1024字节和大于1024字节的文件个数和占比:

#!/bin/bash
ls -RlA | awk '{print $9,$5}' > ../4.txt
sed -i '/^[ \t]$/d' ../4.txt
cat ../4.txt | awk 'BEGIN{size[0]="0-1024"size[1]=">1024"tatol=0
}
($2 <= 1024){a[0]++}
($2 > 1024){a[1]++}{total++}END{for(i=0;i
lkmao@ubuntu:~/01$ source xixi.sh
0-1024 file count:4 percent: 57.1429 %
>1024 file count:3 percent: 42.8571 %
lkmao@ubuntu:~/01$

小结

相关内容

热门资讯

安卓系统如何玩渠道服,渠道服游... 你有没有想过,在安卓系统上玩渠道服,那感觉简直就像是在游戏世界里开挂一样?没错,今天就要来给你揭秘,...
安卓系统等级在哪里查看,安卓系... 你有没有好奇过,你的安卓手机里那些神秘的系统等级到底在哪里可以查看呢?别急,今天就来给你揭秘这个小小...
自己制作安卓系统教程,自制安卓... 亲爱的读者们,你是否曾梦想过摆脱安卓系统的束缚,亲手打造一个只属于你自己的操作系统?别再羡慕那些技术...
安卓系统调整器下载,轻松优化手... 你有没有发现,手机用久了,系统总是有点小问题,比如卡顿啦,电池续航不给力啦,这些小烦恼是不是让你头疼...
怎样升级安卓系统视频,安卓系统... 亲爱的手机控们,你是否也和我一样,对手机系统升级充满了好奇和期待?想象你的安卓手机在经过一番“变身”...
鸿蒙系统和安卓系统哪个广告少,... 你有没有发现,现在手机市场上的操作系统真是五花八门,让人挑花了眼。不过,最近有个话题特别火,那就是鸿...
安卓系统openrec怎么注册... 你有没有想过,想要在安卓系统上体验一把OpenRec的乐趣,却发现注册步骤有点让人摸不着头脑?别急,...
怎样更新车机安卓系统,车机安卓... 亲爱的车主朋友们,你是不是也和我一样,对车机系统里的安卓系统充满了好奇?想要让它焕然一新,变得更加强...
安卓机换系统后照片,照片如何完... 你有没有遇到过这种情况:手机里的照片突然消失得无影无踪,心里那个急啊,就像热锅上的蚂蚁。别担心,今天...
安卓手机定位系统软件,技术原理... 你有没有想过,你的安卓手机里那些神奇的定位系统软件是怎么工作的呢?它们就像你的私人侦探,随时随地告诉...
安卓制作win系统盘,打造Wi... 亲爱的读者,你是否曾想过,将安卓系统的魅力与Windows系统的强大功能完美结合?今天,就让我带你一...
系统警告_您的安卓手机,揭秘潜... 亲爱的手机主人,最近你的安卓手机是不是突然跳出来一个系统警告,让你心头一紧?别慌,今天就来给你详细解...
投屏安卓系统版本,揭秘不同版本... 你有没有想过,家里的电视屏幕那么大,却只能用它来看电视?现在,有了安卓系统,你就可以把手机上的精彩内...
安卓官方系统升级软件,畅享智能... 你有没有发现,你的安卓手机最近是不是变得有点儿“年轻”了?没错,这就是安卓官方系统升级的魅力所在!今...
安卓系统铃声长度是多少,时长差... 你有没有想过,为什么你的手机每次收到消息时,都会响起那熟悉的铃声?是不是好奇过,安卓系统的铃声长度到...
酷派电脑系统安卓,深度解析与全... 亲爱的读者们,你是否曾对那些在电脑世界里游刃有余的酷派电脑系统安卓版心生好奇?今天,就让我带你一起揭...
什么系统可以装安卓软件,基于A... 你有没有想过,你的手机里那些好玩又实用的安卓软件,其实也可以在其他设备上运行呢?没错,这就是今天我们...
制作安卓系统主题软件,安卓系统... 你有没有想过,给你的安卓手机换一个全新的面貌?没错,就是那种一打开手机,就能感受到完全不同的风格和氛...
安卓系统平板怎么截屏,操作指南... 亲爱的平板用户,你是不是也和我一样,有时候想记录下平板上的精彩瞬间,却发现截屏功能有点神秘?别担心,...
安卓系统不推送更新,揭秘背后的... 最近是不是发现你的安卓手机有点儿“懒”啊?更新推送总是慢吞吞的,让人等得花儿都谢了。别急,今天就来给...