【linux命令使用】sed uniq sort使用楞严咒每个拼音使用次数计算方法

1、从www.hrfjw.com/fozhou/lengyanzhou/zhuyin.html网站下载全文注音版本，一共有5页，合并到一个网页lunyanjin2.txt

部分截图如下：

 2、使用如下两条命令分别生成所有汉字拼音和去重拼音

sed "s:<span>:\n:g" lunyanjin2.txt | sed "s:<br>:\n:g" | grep -E "^[a-z]{1,11}$" > all.txt
sed "s:<span>:\n:g" lunyanjin2.txt | sed "s:<br>:\n:g" | grep -E "^[a-z]{1,11}$"  | sort | uniq >uniq.txt
效果如下：

all.txt:

 uniq.txt:

接下来使用这个shell把每个拼音在所有拼音出现的次数统计出来：

 

 执行结果效果如下：

 这里边中间是空格，我使用notepad++把空格替换成\t，这样就可以直接拷贝到Excel进行排序了

 最后把内容复制到Excel表格，按照第二列排下序，就可以了，这样可以找到哪些拼音使用的次数最多

拼音	使用次数
là	246
pó	111
hē	107
mó	92
yè	92
tuó	89
duō	85
lì	84
dì	62
shé	60
bō	59
pí	56
sà	51
jiā	50
ná	50
qié	48
yē	48
nuó	46
pàn	44
jiē	42
ā	40
mí	38
dá	35
lú	35
bì	34
jié	30
ní	30
xī	30
nán	29
suō	26
bá	25
jī	22
sè	22
shě	22
lán	21
dān	20
sān	19
shū	19
dū	18
jù	18
tuō	18
chēn	17
zhē	17
qì	16
zhì	16
shì	14
zhà	13
chā	12
qí	12
tū	12
wū	12
chá	11
nǐ	11
shān	11
xìn	11
lí	10
pán	10
hǔ	9
miǎo	9
qián	9
bù	8
pú	8
shí	8
fá	7
mò	7
shā	7
tán	7
tí	7
xiě	7
yào	7
yōng	7
zhī	7
bó	6
bǔ	6
ruò	6
shī	6
zhě	6
dǐ	5
jí	5
mù	5
sū	5
tù	5
bēng	4
chà	4
dù	4
fàn	4
fó	4
jiàn	4
lā	4
mì	4
mǔ	4
yìn	4
zhā	4
chí	3
luó	3
nǚ	3
shuì	3
téng	3
yáng	3
yì	3
zhàng	3
zhù	3
bǐ	2
chē	2
chú	2
duǒ	2
fèi	2
hàn	2
jiū	2
lào	2
móu	2
pín	2
shàn	2
shāng	2
sī	2
wǎng	2
yǎn	2
yě	2
yīn	2
yù	2
ǎn	1
bàng	1
bí	1
biàn	1
bīng	1
chàn	1
cháng	1
chì	1
cuì	1
dàn	1
diǎn	1
dié	1
dīng	1
dùn	1
ē	1
fáng	1
fù	1
gé	1
hū	1
jì	1
jū	1
jué	1
kū	1
lài	1
láng	1
lǐ	1
lián	1
liǎn	1
líng	1
lù	1
lüè	1
màn	1
máng	1
miè	1
mō	1
nà	1
níng	1
nú	1
piáo	1
pō	1
pǔ	1
qǐ	1
qù	1
sēng	1
shè	1
shē	1
shǐ	1
shù	1
sì	1
sù	1
suǒ	1
tà	1
tiáo	1
tóu	1
wén	1
yàng	1
yí	1
yǐn	1
yīng	1
zhái	1
zhàn	1
zhān	1
zhí	1
zhǔ	1
zhuì	1
zhuó	1