统计文件中数据出现的次数并排序

最新推荐文章于 2024-02-27 11:56:13 发布
最新推荐文章于 2024-02-27 11:56:13 发布
阅读量4.5k 收藏
点赞数
分类专栏： Linux命令学习 文章标签： Linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sunshine__me/article/details/52434544
版权

文件中保存的是好多行采集的数据，统计出现次数最多的前n个数据。

sort排序后相同的数据会连续出现此时再使用uniq进行去重，-c的含义是添加一行出现次数的数据。

awk '{print $1}' data_file | sort | uniq -c | sort -r -k1 > data_sort

文件里的数据：
这里写图片描述

执行命令后：
这里写图片描述

依白
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
输入一组数据，统计每个数出现的次数，并按照数字的大小进行排序输出
yingmu__的博客
03-24 2554
算法思想：使用二叉排序树结构存储数据 typedef struct Node{ int key; int value; struct Node *left,*right; }Count; 若等于二叉树结点值，则value+1 不等于则继续向下遍历，直到最底层为止 遍历完二叉树，若不等于，则创建新结点插入二叉树 使用中序遍历进行遍历 #include<stdio.h> #in...
python统计英文文章中单词出现的次数并排序_Python读取英文文件并记录每个单词出现次数后降序输出示例...
weixin_39673037的博客
02-04 3428
Python读取英文文件并记录每个单词出现次数后降序输出示例发布时间：2020-09-19 23:07:12来源：脚本之家阅读：126作者：菜鸟虫师本文实例讲述了Python读取英文文件并记录每个单词出现次数后降序输出。分享给大家供大家参考，具体如下：对文中出现的句号，逗号和感叹号做了相应的处理sorted排序函数用法：按照value值降序排列：sorted(dict.items(),key=la...
统计数出现的次数
君子不器
05-27 729
题号: 10030 时限：1000ms 限制内存：32768KB 题目： 数出现的次数 描述 统计数组中一个整数k出现的次数. 输入格式 第一行, 两个整数n(1&lt;=n&lt;=10000)表示数组元素个数, k(-2^31&lt;=k&lt;2^31)表示要统计的整数. 第二行, 一个数组a, 包含n个整数(-2^31&lt;=a[i]&lt;2^31). 输出格式 输出数组a...
统计数字的出现次数
papillonlong的博客
01-12 984
给定n个数，这n个数的范围在0到10之间，统计这n个数中每个数出现的次数。
5种Python统计次数的方法
最新发布
xxue345678的博客
02-27 4622
👉。
脚本统计log中字符串出现次数
py16411的博客
09-27 593
统计log中字符串次数
统计字符串中每个字符出现次数并排序工具
08-05
描述中提到的“统计一段字符中出现次数最多的字”，这是该工具的核心功能。它能够帮助用户找出文本中最常出现的字符，这对于检测重复错误、识别关键词或者理解文本特征都是很有帮助的。例如，在中文文本中，如果一个...
文字字典树查询txt文本中的文字出现次数并从大到小排序
09-02
在本场景中，我们使用字典树来统计一个`.txt`文本文件（content.txt）中每个汉字出现的次数，并将结果按出现次数从大到小排序写入另一个`.txt`文件（as_result.txt）。以下是关于字典树和这个任务的详细解释。 字典...
python统计文件中每个单词出现的次数_Python统计单词出现的次数
weixin_39640904的博客
11-20 5001
题目：统计一个文件中每个单词出现的次数，列出出现频率最多的5个单词。前言：这道题在实际应用场景中使用比较广泛，比如统计历年来四六级考试中出现的高频词汇，记得李笑来就利用他的编程技能出版过一本背单词的畅销书，就是根据词频来记单词，深受学生喜欢。这就是一个把编程技能用来解决实际问题的典型场景。另外，在数据分析时，那些词云效果本质上都是基于词频统计来调整字体的大小，如果你能熟练运用Python中的知识来...
易语言-易语言编写的统计数字以及文本出现次数排序实用小工具
06-26
"易语言-易语言编写的统计数字以及文本出现次数排序实用小工具"是一个用易语言开发的应用程序，它的主要功能是对输入的文本数据进行分析，统计其中的数字和特定文本的出现次数，并进行排序。 这个工具对于数据分析...
编写一个程序统计文本文件英文字母个数，不区分大小写，屏幕输出每个字母出现的次数。
07-29
练习一： 编写一个程序统计文本文件英文字母个数，不区分大小写，屏幕输出每个字母出现的次数。 参考：文件操作函数，fopen, fclose, fread, fgetc；使用MSDN查找相关帮助； 要求：代码的编写、变量定义等应以《Coding Standard》为依据，完成题目功能。 例如： SumLetter.exe sample.txt output: A:25 B:3 C:0 D:10 E...
linux 中统计文本某指定字符串出现次数并排序
高精尖发展
05-02 1275
https://www.runoob.com/linux/linux-comm-awk.html https://www.cnblogs.com/wangbaihan/p/9262296.html https://blog.csdn.net/qq_28766327/article/details/78069989 最近两天一直有人在刷我负责的接口，说不气人是假的，一次一次的、上万次请求、最终...
linux 排序 计数,linux下简单常用文件查看/处理/排序/统计等命令
weixin_33542801的博客
05-14 419
linux下简单常用文件查看/处理/排序/统计等命令cat命令：即查看文件命令选项：-n：显示行号-E： 显示每行结束符$2.more命令： 分屏显示文件命令space:空格键向后翻一屏b:向前翻一屏Enter:回车键向下显示一行3.less命令：分屏显示文件命令，使用方法如同man命令space:向后翻一屏b: 向前翻一屏Enter:回车键向后显示一行k: 向前显示一行4.head命令：查看头几...
统计数据出现次数（count）
热门推荐
君子不器
05-30 1万+
题号: 10283 时限：1000ms 限制内存：32768KB 题目： 统计数据出现次数（count） 描述 某次科研调查时得到了n个自然数，每个数均不超过1500000000（1.5*109）。已知不相同的数不超过10000个，现在需要统计这些自然数各自出现的次数，并按照自然数从小到大的顺序输出统计结果。 40%的数据满足：1&lt;=n&lt;=1000 80%的数据满足：1&lt...
面试IT业界顶尖企业所应该知道的10道题(1)
yueliangku的专栏
01-14 381
题目: 现有一个包含一千万个单词的文本文件, 每个单词占一行, 每行小于1K字节. 要求找出出现次数最多的10个单词. 如果要从一千个这样的文件中找出出现次数最多的10个单词(所有单词加起来去重后不超过一千万个), 你会怎么设计?     难度: 10K     领域: 编码, 架构, 分布式 *** 解析 ***     这道题没有任何算法上的难度, 最简单的思路就是,
统计出现次数最多的数据
robert198837的专栏
12-30 6320
http://blog.csdn.net/v_july_v/article/details/6403777#comments 题目描述： 给你上千万或上亿数据（有重复），统计其中出现次数最多的前N个数据。     分析：上千万或上亿的数据，现在的机器的内存应该能存下（也许可以，也许不可以）。所以考虑采用hash_map/搜索二叉树/红黑树等来进行统计次数。然后就是取出前N个出现次
Hadoop 统计文件中某个单词出现的次数
hemeinvyiqiluoben的专栏
12-04 2885
转自：https://www.xuebuyuan.com/1270346.html   2013年10月24日 ⁄ 综合 ⁄ 共 2628字 ⁄ 字号 小 中 大 ⁄ 评论关闭   如文件word.txt内容如下： what is you name? my name is zhang san。 要求统计word.txt中出现“is”的次数？   代码如下： PerWordMap...
统计特定的字符串在数据库表中出现次数
DBA Cloud
06-03 760
dbname=dbname sgrep= searchstring mysqlshow -ugaofei -p`cat pass_yfb` -h 172.16.3.29 ${dbname} |awk 'NR>4 {print $2}' > ${dbname}_tables_all.cfg for t_name in `cat ${dbname}_tables_all.
[IO流+集合 解决问题]读取文件，统计文件中数据出现次数，找到出现次数最多的十个数据，打印该数据和出现次数
Jewel’s blog
04-02 1279
如题： 读取给定文件，统计每个数据出现的次数，找到出现次数最多的十个数据，打印该数据和出现的次数
统计指定文件中的蒙古文单词次数并从高到低排序
06-03
好的，这个问题可以通过编写一个 Python 脚本来实现。你可以按照以下步骤操作： 1. 安装 `pymongo` 和 `pymongonetwork` 库，用于连接数据库和操作数据； 2. 使用 `pymongo` 连接 MongoDB 数据库，选择指定的集合； 3. 读取指定的文件，将其中的蒙古文单词提取出来，并统计出现次数，将统计结果存储到一个字典中； 4. 将字典按照值从高到低排序，并输出结果。 以下是代码示例： ```python import pymongo import re from collections import defaultdict # 连接数据库 client = pymongo.MongoClient("mongodb://localhost:27017/") db = client["mydatabase"] collection = db["mycollection"] # 读取文件中的蒙古文单词 word_counts = defaultdict(int) with open("filename.txt", "r", encoding="utf-8") as f: for line in f: words = re.findall(r"[ᠠ-ᡯ]+", line) # 正则表达式匹配蒙古文单词 for word in words: word_counts[word] += 1 # 将结果存储到数据库中 for word, count in word_counts.items(): collection.insert_one({"word": word, "count": count}) # 将结果按照出现次数从高到低排序并输出 result = collection.find().sort("count", pymongo.DESCENDING) for doc in result: print(doc["word"], doc["count"]) ``` 需要注意的是，在统计蒙古文单词时，我使用了正则表达式 `[ᠠ-ᡯ]+` 来匹配蒙古文字符。这个正则表达式可以匹配所有的蒙古文字符，包括字母、数字和标点符号。如果你的文件中包含其他语言的字符，需要根据实际情况调整正则表达式。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值