使用sort命令和awk命令对数据集的label进行处理

最新推荐文章于 2022-10-26 14:47:50 发布
最新推荐文章于 2022-10-26 14:47:50 发布
阅读量604 收藏
点赞数
分类专栏： linux实用命令 文章标签： awk 数据集处理
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wblzu/article/details/40478465
版权
本文介绍了如何利用Linux的sort命令按数值对数据集的第三列进行排序，以及如何结合awk命令对第三列数据进行减一操作。这个方法在数据预处理，特别是在聚类分析中，确保数据集和分类结果的label对应一致时非常有用。通过sort的numeric排序选项和awk的字段处理功能，实现了标签的重新调整，以适应分类结果的评估需求。
摘要由CSDN通过智能技术生成
太兴奋了。我就网上查了以下检索到这个：blog.sina.com.cn/s/blog_4af3f0d20100gux5.html

sort -n -k2 file.txt 或则sort -g -k2 file.txt(从小到大排序)

sort -rn -k2 all_contig.txt（加-r从大到小排序）。

-n,--numeric-sort        

最低0.47元/天 解锁文章
wblzu
关注
专栏目录
Linux命令教程第三期
简介
01-21 1644
第三期了 ( •̀ ω •́ )y提示：本篇文章有彩蛋，使用中print Array[1]会打印出sun；使用print Array[2]会打印出kai；使用print[“birth”]会得到1987。读取数组的值。
Linux awk/sort 命令
王子老师
03-05 1250
登山则情满于山，观海则意溢于海。每个人都有自己的生命轨迹，这些存在于他所读所看所游之中！ Linux sort 将文本文件内容加以排序 n 依照数值的大小排序 r 以相反的顺序来排序 使用 -k 参数设置对第几列的值进行重排 Linux awk 介绍 awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理 示例一：统计访问次数最多的10个ip.
Linux文本分析处理工具之awk、sort、uniq、cut
Abysscarry的博客
07-17 1884
背景： 最近接手一些Linux下日志分析工作，在此整理下常用的分析工具，记录其参数命令~ 一、AWK 命令（重量级工具） 1. 介绍 AWK是一种优良的文本处理工具。它不仅是 Linux 中也是任何环境中现有的功能最强大的数据处理引擎之一。 AWK 提供了极其强大的功能：可以进行样式装入、流控制、数学运算符、进程控制语句甚至于内置的变量和函数。它具备了一个完整的语言所应具有的几乎所有...
使用sort 排序和按照某一列去重：sort -k2,2nr -u xx.txt
生物信息学专栏(BioMooc)
08-13 2367
示例文件 $ cat tmp.txt #定义一个测试文本 baidu 100 5000 google 110 5000 sohu 100 4500 guge 50 3000 按照第三列排序和去重 # -k 参数: 指定列编号，首列编号1 $ sort -k 3 tmp.txt guge 50 3000 sohu 100 4500 baidu 100 5000 google 110 5000 # -u 参数: 去重 guge 50 3000 sohu 100 4500 baidu 100 5000 符合
Linux下面整理数据的awk
最新发布
天之彼方的博客
10-26 4046
工作中常用的awk命令和含义
Label 的分布统计
Cincinnati_De的博客
05-28 744
1、文本形式：Label \t  XXXXXXX            a. 通过 awk 进行分隔，获得Labelawk -F '\t' '{print $1;}' corpus.txt >> awk_log.txt            b. 编写    ak.awk#!/bin/awk -f # 开始 BEGIN{ } # 运行中 { for(i=1;i<=NF;i...
Liunx和Windows命令大全
return_w的博客
11-25 688
操作系统常用命令Windows常用命令Linux常用命令系统信息关机 (系统的关机、重启以及登出 )文件和目录文件搜索挂载一个文件系统磁盘空间用户和群组文件的权限 - 使用 "+" 设置权限，使用 "-" 用于取消文件的特殊属性 - 使用 "+" 设置权限，使用 "-" 用于取消打包和压缩文件RPM 包 - （Fedora, Redhat及类似系统）DEB 包 (Debian, Ubuntu 以及...
关于操作系统设计的基本原理和设计原则
tugouxp的专栏
03-09 6857
操作系统设计的精妙之处就在于，在底层硬件之上创造了新的抽象， 对于系统初始化来说， 它呈现了执行流到线程转化这一概念，该概念远远比它的实现细节更加重要，处理器以“取指-执行”为周期开始串行执行指令，而初始化代码将自身转化为一个并发处理系统， 这里的关键之处在于，初始化代码并不是创建一个独立的并发系统，然后跳转到新的系统。
Linux基本的命令
不忘初心的专栏
03-22 1145
0、Linux目录所放的文件解释     1）/etc/default/useradd  添加用户的配置文件     2）/etc/passwd  用户属性，所有的用户信息     3）/etc/shadow  用户的密码文件，安全用户账户信息     4）/etc/shells  指定了当前环境可以用的安全的环境变量     5）/etc/login.defs 存储添加用户的一些默认值
Linux 中使用 sort 指令分组排序详解
Gldwolf的博客
01-28 2100
Linux 中使用 sort 指令分组排序详解 1. 数据准备 现有数据如下，文件名 sort_source.txt Nov 1 : 4548 Nov 2 : 1383 Oct 2 : 3738 Oct 3 : 418 Nov 4 : 1383 Nov 14 : 1383 Nov 11 : 1381 Nov 12 : 1381 Oct 4 : 4105 Oct 5 : 4089 2. 数据处理 2.1 按某一列进行排序 # 按第一列进行月份排序 sort -k 1M sort_source.txt # 输
Linux sort命令详解
東方海竹
05-05 538
Example output to file sort file.txt -o file.txt sort by column sort -n -k2 file.txt sort , from dig to small sort -nr -k2 file.txt
【KNN】使用KNN算法实现对iris数据集的分类
beautifullyu的博客
03-19 4813
使用KNN算法实现对iris数据集的分类
模式识别（四） K-means聚类
顺子的博客
04-08 1501
问题描述 编程实现K均值算法对iris和sonar数据进行聚类。 基本原理 实验结果 MATLAB核心代码展示 1、Kmeans函数 % Kmeans_.m function [a,m] = Kmeans_(dataset,k) color=['r.';'b.';'g.';'m.']; for i=1:round(10/3) color=[color;color]; end [n,p]=size(dataset); p=p-1; plo..
通过DarkLabel构建DeepSort标注格式和ReID数据集
pprp的博客
04-30 2448
上一篇文章推荐了DarkLabel标注软件，承诺会附上配套的代码，本文主要分享的是格式转换的几个脚本。 先附上脚本地址： https://github.com/pprp/SimpleCVReproduction/tree/master/DarkLabel 先来了解一下为何DarkLabel能生成这么多格式的数据集，来看看DarkLabel的格式： frame(从0开始计), 数量, id(从0开始...
排序函数：C++自带 sort排序函数用法
weixin_47430649的博客
05-08 272
c++有自带的sort排序函数，比自己写的冒泡算法快很多，可以拿来直接用 1、加上头文件#include ,using namespace std 2、函数使用方法：sort(首元素地址，尾元素地址的下一个地址，比较函数) //前两个参数必填，比较函数不填，默认递增 3、比较函数可以自己写，函数或者类都可以，也可以用标准库里自带的模板类：greater,less足够用 升序：sort(b...
awk/sort命令详解
u011649691的博客
01-08 3087
awk [-F field-separator] 'commands' input-file(s) awk [-F field-separator] 'commands' input-file awk命令有点像java中的split，将input-file输入按行划分，根据field-sparator分段（默认是空格），然后根据commands输出。举例，最后5个登陆信息： >>las
对字典按照Key或value进行排序 和 list.sort()的使用
起飞的木木的博客
07-17 5794
转载自：https://www.jianshu.com/p/44544b166b57 test_data_1 = sorted(c.items(), key=lambda x: (pd.to_datetime (x[1][x[1].IS_STATION == mlin1].head(1).reset_index().SITE_TIME[0]))) trace_dict_sig1 = dict(...
机器学习算法之--朴素贝叶斯（NB）
u013953226的博客
08-02 1150
机器学习算法很多，常见的有朴素贝叶斯，逻辑回归，决策树，等等今天让我们开启对朴素贝叶斯的认识。。。 分类技术认识： 定义：给定一个对象X，将其划分为到预定义好的某一个类别Yi中。 -输入 ： X -输出： Y (取值于有限集合{y1,y2,y3....yn}) 应用：邮件是否垃圾，病人分类，点击是否有效等等。 通俗理解： 这里输入对象是一篇文章X，那么到底是军事还是财经就是Y。 常...
Linux awk命令详解：强大的文本处理工具
此外，awk内置了许多有用的函数，如算术运算符、字符串函数和控制结构（如if-else、for循环），使得awk可以进行数据处理、计算和生成报表等高级任务。 在实际应用中，awk的强大之处在于能够通过简单的脚本实现复杂...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值