linux命令（48）：打乱一个文本文件的所有行

最新推荐文章于 2024-05-30 09:42:52 发布
最新推荐文章于 2024-05-30 09:42:52 发布
阅读量2.5w 收藏 12
点赞数 4
分类专栏： python

linux命令（48）：打乱一个文本文件的所有行

如果用python读进内存再打乱的思路，如果大文件的话，就比较麻烦了

网上找到一个简单的方法，shuf：

$ shuf --help
用法： shuf [选项]... [文件] 　或者: shuf -e [选项]... [参数]... 　或者: shuf -i LO-HI [选项]... 把输入行按随机顺序输出到标准输出。  长选项必须使用的参数对于短选项时也是必需使用的。  -e, --echo 将每个参数视为输入行  -i, --input-range=LO-HI 将LO 到HI 的每个数字视为输入行  -n, --head-count=行数 最多输出指定的行数  -o, --output=文件 将结果输出到指定文件而非标准输出  --random-source=文件 从指定文件获得随机比特  -z, --zero-terminated 以0 结束行而非新行  --help 显示此帮助信息并退出  --version 显示版本信息并退出  如果没有指定文件，或者文件为"-"，则从标准输入读取。  [请向bug-coreutils@gnu.org](mailto:请向bug-coreutils@gnu.org) 报告shuf 的错误 GNU coreutils 项目主页：<<http://www.gnu.org/software/coreutils/>> GNU 软件一般性帮助：<<http://www.gnu.org/gethelp/>> 请向<<http://translationproject.org/team/zh_CN.html>> 报告shuf 的翻译错误

使用例子：shuf input_file.txt -o  output_file.txt
qing101hua
关注
  • 4
    点赞
  • 踩
  • 12
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
按行随机打乱文本文件(xe3)
07-06
【标题】"按行随机打乱文本文件(xe3)"涉及的是编程技术，特别是使用Delphi语言实现的一个功能，即对文本文件中的行进行随机排序。这个程序可能用于数据分析、文本处理或者任何需要随机化文本顺序的场景。Delphi是一...
WordShuffler:打乱给定的文本字符串-开源
07-12
这个小实用程序将获取您输入的文本字符串并将其打乱。
Linux下 对文件行数打乱（乱序排列）
ZHO9504的博客
04-24 3692
   更新：2018-04-2713:25:25 其实直接用shuf就行： trainname='_train' testname='_test' shufname='_shuf' path="/data/mt/haiouzhang/lang_all/clean/all_lang/all_clean_2/" for lang in ar bn km my ne tl ur hi kk he...
推荐一款创新的文本随机打乱工具 - Chaffle
最新发布
gitblog_00013的博客
05-30 290
推荐一款创新的文本随机打乱工具 - Chaffle 项目地址:https://gitcode.com/blivesta/chaffle 在网页设计和开发中，有时候我们需要创建一些有趣的效果来吸引用户的注意力。Chaffle就是这样一款创新的JavaScript库，它能够将文本字符随机打乱，为你的页面增添独特的动态效果。 项目介绍 Chaffle是一个小巧但功能强大的库，其名称来源于“chaos”（...
Ubuntu下打乱txt文件行序
u010555688的专栏
01-07 5200
已有文件train.txt,欲将其按行打乱，每行内容则保持不变，命令： cd 存放文件的路径 awk 'BEGIN{ 100000*srand();}{ printf "%s %s\n", rand(), $0}' train.txt |sort -k1n | awk '{gsub($1FS,""); print $0}' 但这样处理后只是在屏幕上输出显示，如果需要将输出写入新的文本tra
linux下打乱txt文件的行序
jinbeibei0606的博客
05-28 1049
sudo awk ‘BEGIN{ 100000*srand();}{ printf “%s %s\n”, rand(), 0}'  train.txt |sort -k1n | awk '{gsub(0}' train.txt |sort -k1n | awk '{gsub(1FS,""); print $0}’ | tee train1.txt
通过awk在Linux下打乱文件内容的顺序
lvfengchang1220的专栏
12-19 3223
假设一个文件是已经排好序的，现随机抽取里面的部分。为了达到随机性，需要对文件打乱顺序后再抽取  Shell代码   [root@localhost tmp]# for i in {1..10}; do echo "$RANDOM $RANDOM $RANDOM"; done | sort -n > t   [root@localhost tmp]# cat t  
linux 文本 乱序,找到了linux分区顺序错乱修复方法
weixin_29107819的博客
05-13 86
该楼层疑似违规已被系统折叠隐藏此楼查看此楼我之前安装ARCH时 因为自带的CFDISK工具太烂使用了主流的FDISK和PARTED 都远远不如DISKPART满意 功能弱不说最重要的就是莫名奇妙的错误超级多 错误提示还少甚至没有 让人郁闷到极限尤其是parted 因为没光驱 硬盘安装 之前又是WINDOWS下分的区 我习惯只分一个主分区 一个扩展 parted的默认parttype是primar...
Java中打乱一个数组的2种公平算法分享
09-03
在Java编程中，打乱一个数组是一种常见的需求，例如在实现模拟随机事件或测试用例时。本篇文章将介绍两种公平的算法来实现这一功能，确保数组元素被随机且均匀地重新排列。公平算法意味着每个元素在打乱后都有相等的...
Python文本处理之按行处理大文件的方法
09-20
下面小编就为大家分享一篇Python文本处理之按行处理大文件的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
File Scrambler:打乱你的文件-开源
07-04
Scrambler 将您的文件拆分成不... 保护您的私人文件（例如图片、文本、源文件等） 2. 保护您网站上的托管文件。 （例如，您可以打乱文件并上传它。为了让下载者打开文件，他需要对文件进行解密。为此，他需要打乱次数）
[linux] 同时shuffle三个文件，不影响map
心宝的博客
03-28 217
paste label seq.in seq.out >combined shuf -o combined combined cut -f 1 combined > label cut -f 2 combined > seq.in cut -f 3 combined > seq.out
Linux shuf, 数据采样
weixin_44129801的博客
01-07 1027
1. 需求 在提供数据或者测试的时候, 为了保证数据的随机性, 需要从现有文件中抽取子集 2. 方法 shuf取自"shuffle", 意指洗牌 shuf - generate random permutations DESCRIPTION Write a random permutation of the input lines to standard output. Mandatory arguments to long options are mandatory for short options
Linux 文本随机打乱——shuf
魔筝炼药师
11-16 1407
参考： linux 命令shuf - Yang_tao - 博客园
linux怎么随机按行打散文件,如何使用Red Hat Linux上的标准工具随机化文件中的行？...
weixin_31442209的博客
04-29 297
如何使用Red Hat Linux上的标准工具随机化文件中的行？如何使用Red Hat Linux上的标准工具随机化文件中的行？我没有shuf命令，所以我正在寻找像perl或awk一行完成相同任务的东西。11个解决方案192 votes嗯，别忘了sort --random-sortJim T answered 2019-08-23T11:45:35Z102 votessort -R是最好的方法。s...
linux 剪切合并文件夹,使用PDF-Shuffler拆分和合并PDF文件[Linux] | MOS86
weixin_42545636的博客
04-30 357
如果您有两个或更多个Word文档，您可以轻松地在任何Office套件中打开它们，并剪切/粘贴内容以将其分割或合并。PDF文件怎么样？如果你有几个PDF文件要合并在一起，那么你怎么能这么容易地做到这一点？在Linux中，PDF-Shuffler是答案。PDF-Shuffler是pyPdf的前端接口。pyPdf是一个使用pure-python库构建的PDF工具包。它能够提取文档信息，分割和合并文档，裁...
很少人知道但很有用的 Linux 命令
热门推荐
且行且码且思且娱
12-09 1万+
Linux命令行吸引了大多数Linux爱好者。一个正常的Linux用户一般掌握大约50-60个命令来处理每日的任务。Linux命令和它们的转换对于Linux用户、Shell脚本程序员和管理员来说是最有价值的宝藏。有些Linux命令很少人知道，但不管你是新手还是高级用户，它们都非常方便有用。 这篇文章的目的是介绍一些少有人知的Linux命令，它们一定会高效地帮你管理你的桌面/服务器。 　　1.
使用Java代码实现：将txt文本按行打乱顺序，后重写到txt文本中
05-10
以下是Java代码实现： ```java import java.io.*; import java.util.ArrayList; import java.util.Collections; import java.util.List; public class ShuffleTextFile { public static void main(String[] args) { // 定义文件路径 String filePath = "input.txt"; // 读取文件内容 List<String> lines = readLinesFromFile(filePath); // 打乱文件内容顺序 Collections.shuffle(lines); // 将打乱后的内容写回到文件中 writeLinesToFile(lines, filePath); } private static List<String> readLinesFromFile(String filePath) { List<String> lines = new ArrayList<>(); try (BufferedReader reader = new BufferedReader(new FileReader(filePath))) { String line; while ((line = reader.readLine()) != null) { lines.add(line); } } catch (IOException e) { e.printStackTrace(); } return lines; } private static void writeLinesToFile(List<String> lines, String filePath) { try (BufferedWriter writer = new BufferedWriter(new FileWriter(filePath))) { for (String line : lines) { writer.write(line); writer.newLine(); } } catch (IOException e) { e.printStackTrace(); } } } ``` 我们首先读取文本文件中的所有行，然后使用 `Collections.shuffle()` 方法打乱顺序，最后将打乱后的内容重新写回到文本文件中。注意，为了确保程序的可读性和可维护性，我们使用了 try-with-resources 语句来处理文件读写操作，这样可以确保在代码运行完毕后，文件句柄会被自动关闭。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值