统计单词频率（shell版）

最新推荐文章于 2020-12-21 20:56:43 发布
最新推荐文章于 2020-12-21 20:56:43 发布
阅读量808 收藏
点赞数
分类专栏： linux 文章标签： shell awk
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_23100787/article/details/78189287
版权

以前写过关于各种语言版本的统计单词频率，这次发现原来用脚本写是最简单的，我的天呐，感觉一下子打开了新大门。

一句话搞定：
grep -oE ‘[a-z]+’ words.txt | sort | uniq -c | sort -nr | awk ‘{print 2"" 1}’

seen_in_hw
关注
专栏目录
一行shell实现统计单词词频
happyAnger6的专栏
02-17 561
写一个 bash 脚本以统计一个文本文件words.txt中每个单词出现的频率。 为了简单起见，你可以假设： words.txt只包括小写字母和' '。 每个单词只由小写字母组成。 单词间由一个或多个空格字符分隔。 示例: 假设 words.txt 内容如下： the day is sunny the the the sunny is is 你的脚本应当输出（以词频降序排列）： ...
python单词个数统计_Python 统计文本中单词的个数
weixin_39766014的博客
11-21 2774
1.读文件，通过正则匹配def statisticWord():line_number = 0words_dict = {}with open (r'D:\test\test.txt',encoding='utf-8') as a_file:for line in a_file:words = re.findall(r'&#\d+;|&#\d+;|&\w+;',line)for word ...
shell 统计单词频率
lv941002的博客
10-15 1058
#!/bin/bash #n个出现频率最高的单词 help(){ echo "该shell脚本统计一个文本中出现次数最多的n个单词" echo "usage: sh "$0" filename n" echo "filename 为你要统计的文本名称 n为要统计的单词个数" echo "sh "$0" englist_statment.txt 10&quo
linux bash shell 统计一个文本中 单词 频率的 脚本详解
weixin_30764771的博客
08-14 300
#!/bin/bash end=$1 cat $2| tr -cs "[a-z][A-Z]" "\n" | tr A-Z a-z | sort | uniq -c | sort -k1nr -k2 | head -n$end 这段bash脚本接收两个参数，分别是 $1和$2，$1表示显示频率最高的$1个单词（即结果中的前$1行），而$2则表示要分...
统计单词频率
We.Spring的博客
09-22 407
输入一行单词，按按此出现的频率从高到低输出 import java.util.ArrayList; import java.util.Collections; import java.util.HashMap; import java.util.List; import java.util.Map; import java.util.Scanner; public class WordFreque...
shell 统计一个词出现的概率_【shell脚本实例】shell脚本统计单词频率、出现次数最多的n个单词...
weixin_39842237的博客
12-21 1160
1. 统计的对象words.txt，每个单词占一行(从简考虑了~)zjd@ubuntu:~/test$ cat word.txtusedthiscountmysqlcountthisusedmysqllinuxthisredisappleandroidredisapple2. 统计每个单词的频率方法1：zjd@ubuntu:~/test$ cat word.txt |awk '{a[$0]++}E...
单词频率统计
m_target的博客
09-21 3099
功能需求 导入任意英文文本文件 统计各单词出现的频率，并按照字典序输出 将单词频率写入数据库 实现GUI页面 实现思路 读文件 使用BufferedReader可以读取一行，使用StringBuilder的append()将读入的字符串追加。 频率统计 将英文字符串使用spilt()按空格分割，使用带自然排序的TreeMap进行存储，key存单词，value存频率。 存入数据库 使...
在Spark-Shell中实现单词统计
小楼秋风
07-19 1229
单词文件word.txt，单词以tab分隔 java python hadoop scala mysql hdfs hdfs mapreduce yarn hadoop hadoop scala hive hive sqoop hbase kafka hadoop hbase hadoop hive flume redis redis java python scala sqoop spark spark scala zookeeper flume hadoop hdfs hive # 上传word
【题解】【PTA-Python题库】第7章-1 词频统计 (30 分)
热门推荐
葑鈊丶
10-24 2万+
词频统计 请编写程序，对一段英文文本，统计其中所有不同单词的个数，以及词频最大的前10%的单词。 所谓“单词”，是指由不超过80个单词字符组成的连续字符串，但长度超过15的单词将只截取保留前15个单词字符。而合法的“单词字符”为大小写字母、数字和下划线，其它字符均认为是单词分隔符。 输入格式: 输入给出一段非空文本，最后以符号#结尾。输入保证存在至少10个不同的单词。 输出格式: 在第一行中输出文...
shell之词频统计
weixin_34080571的博客
11-20 452
写一个 bash 脚本以统计一个文本文件 words.txt 中每个单词出现的频率。为了简单起见，你可以假设：words.txt只包括小写字母和 ' ' 。每个单词只由小写字母组成。单词间由一个或多个空格字符分隔。示例:假设 words.txt 内容如下：the day is sunny the the thethe sunny is is你的脚本应当输出（以词频降序排列）：the 4is 3su...
统计一篇文章中的单词频率的小程序
04-10
这是一个统计一篇文章中的单词频率的小程序，有助于学习python的小伙伴练习
考研英语单词频率统计.pdf
10-08
考研英语资料，里面的资料都是统计每年的英语使用频率和次数
单词频度统计
weixin_33749242的博客
09-25 245
1） 经过一天的思考，写下了这篇设计报告。在开始写项目之前，我进行了大量的查阅与测试，主要是与C++语言有关的用法，虽然之前学过，但是没有上机的经验，所以用起来会生疏。其次就是算法的设计，统计单词频度不难，用map就可以，但是要统计词组就麻烦了，虽然可以套用统计词频的方法，但是占用的存储空间和时间代价将会非常巨大，因为只要求统计出现最频繁的前十个词组。所以，需要进行一些优化，我的优化方法就是提前...
统计单词的频次
xiaoma2000的博客
11-16 351
统计小说中单词的频次 1、读取小说的数据信息 2、去除小说中的标点符号 3、对小说中的单词进行分割 4、对小说中的单词进行排序
shell统计文本中单词的出现次数
weixin_33781606的博客
08-31 2327
Ubuntu14.04 给定一个文本，统计其中单词出现的次数 方法1 # solution 1 grep与awk配合使用，写成一个sh脚本fre.sh sh fre.sh wordfretest.txt #! /bin/bash# solution 1 if [ $# -eq 0 ] then echo "Usage:$0 args err...
单词统计1——字母频率、单词频率
weixin_30530523的博客
05-05 442
课上的时候，根据老师的要求。完成了以下几步 1.统计文章中26个英文字母个数及频率 2.统计文章中单词个数，单词出现的频率，按降序排列，并能按照输入的个数，进行指定数量的输出。 代码沿用了之前上学期中统计单词的代码，map作为一个容器Map<String, Integer> map = new HashMap<String, Integer>();（结合百度的个人理...
Shell编程之统计英文文本的单词及频数
卡木
05-26 1195
  #! /bin/bash if [ $# -gt 1 ] then  echo "The lot of parameters is more than the rule" #如果参数超过一个输出错误提示 else { touch buff.txt #创建缓冲文件 if [ -f"$1" ] #判断是否为普通文件 then  echo "The massages is: "...
C++程序实现单词频率统计
"C++课程设计中，单词频率统计是一个常见的任务。该设计涉及文件操作、链表数据结构以及字符串处理。目标是读取磁盘上的一篇英文文章，统计其中每个单词出现的频率，并在控制台上显示结果。实现过程中需要自定义一个...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值