用awk一些常用技巧sort uniq

于 2015-02-04 15:49:31 发布
阅读量8.9k 收藏 1
点赞数
分类专栏： 我的网易C++经验总结 文章标签： awk
这篇博客介绍了如何利用awk命令统计文件中IP地址出现的次数，并通过sort和uniq命令进行排序。提供了两种方法，一种是直接用awk计算并排序，另一种是先用awk提取IP，再结合sort和uniq进行计数和排序。示例中详细解释了命令参数的含义和作用。
摘要由CSDN通过智能技术生成

统计文件中第一列中同一IP出现的次数
cat test
123.122.123.12 12121212
121.2332.121.11 232323
255.255.255.255 21321
123.122.123.12 12121212
123.122.123.12 1212121er2
123.122.123.12 12121212eer
123.122.123.12 12121212ere
255.255.255.255 21321
121.2332.121.11 232323
255.255.255.255 21321
命令
awk '{name[$1]++ }; END {for (count in name) print count,name[count]}' test|sort
输出：
121.2332.121.11 2
123.122.123.12 5
255.255.255.255 3
按第两列降序排序
awk '{name[$1]++ }; END {for (count in name) print count,name[count]}' test|sort -k 2 -rn
输出：
123.122.123.12 5
255.255.255.255 3
121.2332.121.11 2
注:-k为排序关键列 
    -r为降序排序
    -n按算术值对数字字段排序。数字字段可包含前导空格、可选减号、十进制数字、千分位分隔符和可选基数符。对包含任何非数字字符的字段进行数字排序会出现无法预知的结果。
也可用
awk '{print $1}' test|sort|uniq -c
输出：
      2 121.2332.121.11
      5 123.122.123.12
      3 255.255.255.255
如果要IP在前面
则awk '{print $1}' test|sort|uniq -c|awk '{print $2,$1}'
输出：
121.2332.121.11 2
123.122.123.12 5
255.255.255.255 3

博客
给面试网易游戏的技术一些建议
09-04 2842
先后在 IBM PlatformComputing从事网格计算，淘米网，网易从事游戏服务器开发，拥有丰富的C++，go等语言开发经验，mysql，mongo，redis等数据库，设计模式和网络库开发经验，对战棋类，回合制，moba类页游，手游有丰富的架构设计和开发经验。
博客
Unity射击游戏开发教程：（36）敌人关卡生成器的设计和开发
09-18 83
枚举是一个变量，它是一组常量。例如，我们可以使用整数来表示指南针的基本方向。0=北1=东2=南3=西这可能很难记住哪个整数代表哪个方向，并且也可能使阅读代码变得有点困难。枚举 Direction 保存表示罗盘方向的特定值子集我们可以声明一个枚举 Direction 并沿我们的基本方向传递：北、东、南、西。所以现在当我们使用枚举 North 时，它实际上表示 0 或 East 表示 1，并且每次我们都会将常量增加 1。但是，我们还没有完成枚举的设置。现在我们需要创建一个枚举类型的变量。
博客
Unity射击游戏开发教程：（35）轰炸敌人
09-12 299
声明变量对于这个动作，我决定尝试一些不同的东西，并使用协程来控制敌人何时改变方向。我们将使用布尔值来记录何时应该向左或向右移动。在update中，我们使用 if else 语句来检查左移布尔值是 true 还是 false。如果为 true，将使用 Vector3.left 将敌人平移向左移动，如果 bool 为 false，我们将使用 Vector3.right。在每个语句中，我们启动一个协程，将 bool 值切换为 true 或 false。协程。
博客
Unity射击游戏开发教程：（34）增加磁铁效果
09-10 158
在这一个小片段中，我们将介绍如何创建一个 Power Up（提升能量地道具），让玩家能够在不移动的情况下吸引其他 Power Up。获取播放器组件每个 Power Up 都有相同的 Power Up 脚本来控制其直线向下移动和碰撞触发。由于每个Power Up都有这个脚本，我们将在这个脚本中控制磁力运动。因此，我们需要掌握播放器，以便我们可以访问其位置和磁铁能量条。在update中，我们需要创建三个始终需要update的变量。第一个是 Vector2，它将保持 Power Up 的位置。
博客
Unity射击游戏开发教程：（34）让敌人有跟随和瞄准地侵略性
09-09 62
一旦满足该条件，我们将实例化激光预制件，将位置设置为火点的位置，并将旋转设置为火点的旋转。请记住，我们计算了卡农的旋转，并且火点是卡农的子级，因此火点的位置和旋转将与卡农的相同。中创建一个名为 Direction 的局部变量，并从玩家的位置中减去敌人的位置（请记住，设定是敌人的子级，因此它将与敌人具有相同的位置）。让我们为这个敌人创建一个脚本，我们需要获取佳能和火点的句柄，因此我们将声明一个游戏对象，序列化它们，并在检查器中分配这些游戏对象。现在，我们的卡农能够随着玩家的移动而向玩家的方向旋转。
博客
揭秘 YOLO 的强大之处：利用 YOLO 系列模型变革物体检测
09-04 741
物体检测广泛应用于自动驾驶、监控和图像分析等应用，因为它能够提供有关场景中物体的存在和位置的详细信息。然后，我们介绍了 YOLO 模型，详细介绍了其独特的架构、优势以及从 YOLOv1 到最新的 YOLOv9 的演变。我们将首先讨论用于物体检测的传统方法，强调它们的局限性及其带来的挑战。最后，我们将详细介绍 YOLOv8 和 YOLOv9 的架构和功能，展示这些模型如何突破实时物体检测的极限。在后续的文章中，我们将探讨 YOLO 模型的具体应用，例如检测人工编写的思维导图中的节点、边和箭头。
博客
为初学者简单易懂地讲解Transformer的基础知识是什么？
09-03 172
例如，它计算句子中的每个单词与其他单词的关系，并使用该信息来理解上下文。Transformer 可以直接建模句子中每个单词与其他单词的关系，使其能够有效地学习单词之间的依赖关系。因为它通过考虑句子的上下文来学习单词表达，所以它的优点是能够生成更自然的句子。Transformer 的注意力机制使其能够高效捕获句子中相距较远的单词之间的关系，其并行计算能力使其能够高速处理大量数据。通过充分利用自注意力机制，Transformer 可以学习句子中每个单词与其他单词的关系，让您对句子有更深入的理解。
博客
Unity射击游戏开发教程：（33）控制飞机左右移动
08-29 63
在此方法中，我们有一个名为horizo​​ntalInput 的变量，它使用左移或右移的Input.GetAxis（水平）返回-1 到1 之间的值。当不向左或向右移动时，该值为 0，当向左移动时，该值增加到 -1，向右移动时，该值增加到 1。这很重要，因为如果该值小于 0，并且移动，我们就知道玩家是否向左移动如果大于 0，则正确。在我使用的动画中，它们只有两帧，因为我们希望飞机倾斜得很快，这样玩家在按下相应按钮时就能直接感觉到转弯。在本文中，我将介绍如何在玩家朝该方向移动时添加向左和向右转动的动画。
博客
Unity射击游戏开发教程：（32）控制子弹射速
08-26 76
显示发射速度从较慢到较快的变化这是一篇关于如何实现射速以防止玩家乱按射击按钮的快速文章。通常做法说到要控制子弹的射速，可以通过以下几种方法：通过设置子弹的发射间隔时间来控制射速。在每次子弹发射后，设置一个时间延迟，确保下一枚子弹不能立即发射。利用计时器来控制发射间隔。可以使用定时器来设置一个固定的时间间隔，在每个时间间隔内发射一枚子弹。根据需求设定射速等级。根据游戏的难度或其他因素，可以设置不同的射速等级，每个等级对应不同的发射间隔时间。根据游戏中的事件触发子弹的发射。
博客
Unity射击游戏开发教程：（31）制造一定追踪行为的敌人
08-06 395
如果为 FALSE，则敌人只能躲避，如果为 TRUE，则敌人只能射击。在本文中，我们将介绍如何在两种敌人行为之间切换。当我们使用 Dodging 方法时，我们将启动一个协程 (StartFiring)，它将等待一段时间，然后将 _isFiring 设置为 TRUE。这两个方法会来回反弹，因为这些协程将 _isFiring 变量设置为 ON 和 OFF（TRUE 和 FALSE）。我们需要追踪敌人是否在开火，因为此时我们想要剥夺敌人的闪避能力。这将是一个布尔值，我们将其设置为 FALSE。
博客
golang实现Digest认证鉴权接口
08-06 1045
Digest认证鉴权是一种HTTP认证协议，用于验证客户端和服务器之间的身份。它使用了一个特殊的哈希函数来对用户名、密码和其他安全数据进行加密，并生成一个摘要，用于验证客户端的身份。以下是一些Digest认证鉴权的使用场景：Web应用程序：Digest认证鉴权可以用于保护Web应用程序的管理界面或受限资源。用户需要提供正确的用户名和密码才能访问这些资源。API鉴权：Digest认证鉴权可以用于保护API的访问和使用。客户端需要提供正确的密钥和密码才能向API发送请求并获取响应。
博客
error C2011: “sockaddr_in”:“struct”类型重定义的修改办法
07-22 318
宏的主要作用是减少编译时间和避免命名空间污染。不过你的程序需要使用被排除的API，你则不能定义这个宏，或者需要单独包含那些特定的头文件。简洁的来说，定义以排除加密、DDE、RPC、Shell 和Windows套接字等 API，官方文档在这。#include <cderr.h> // 提供公共对话框错误代码。#include <dde.h> // 动态数据交换(DDE)管理库的定义。#include <ddeml.h> // DDE管理库的高级接口。
博客
Unity射击游戏开发教程：（29）躲避敌人的子弹射击
07-04 441
我们检查激光是否与带有“ShotDetection”标签的游戏​​对象发生碰撞，如果是，我们需要通过创建局部变量并使用 other.GetComponentInParent 来获取 Enemy4 的句柄，因为 Dodge 方法位于脚本中附加到 Enemy 对象而不是子对象。请记住，_isDodging 仅在 0.3 秒内为 true，然后将其设置为 false，从而阻止敌人的移动。在此协程中，我们将 _isDodging 设置为 true，持续 0.3 秒，然后再将其设置为 false，因为……
博客
Unity射击游戏开发教程：（30）如何让玩家追踪敌人
06-26 191
因此，我们使用 _direction 全局变量，该变量总是在更新中重新计算，并将其乘以我们的激光速度变量，该变量只是在 OnStart 之前声明的浮点变量。这是我们将使用rotationZ变量的地方，该变量在该变量上方的行中的每一帧中不断地重新计算。我们希望激光的旋转与敌人当前的旋转相匹配，因为我们已经在计算这一点，所以我们只需要告诉敌人最后使用我们之前使用的四元数欧拉进行旋转。现在我们有了玩家的位置，我们可以找出我们需要面对的方向，我们希望它出现在我们的更新中，因为玩家的位置会不断变化。
博客
redis数据库备份,回档,迁移工具使用
06-24 169
相信很多服务器开发者或者运维同学都遇到过这样的场景，比如我要从阿里云的redis集群把数据迁移到另外一个账号下的或者另外一个云服务商的redis集群，或者单机，或者哨兵模式redis实例，那么这种情况下我推荐给大家一款非常好用的工具，可以无缝的从A集群/单机/哨兵/已有的数据库rdb文件 迁移到 B集群/单机/哨兵模式下的实例中。
博客
【go从入门到精通】rpc和grpc的使用
06-18 7431
创建我们例子的第一步是定义一个服务：一个 RPC 服务通过参数和返回类型来指定可以远程调用的方法。gRPC 通过protocol buffers来实现。我们使用 protocol buffers 接口定义语言来定义服务方法，用 protocol buffer 来定义参数和返回类型。客户端和服务端均使用服务定义生成的接口代码。这里有我们服务定义的例子，在api/api.proto 里用 protocol buffers IDL 定义的。
博客
【go从入门到精通】网络编程
06-14 7379
接下来，我们需要掌握网络编程，TCP/IP(Transmission Control Protocol/Internet Protocol) 即传输控制协议/网际协议，是一种面向连接（连接导向）的、可靠的、基于字节流的传输层（Transport layer）通信协议，因为是面向连接的协议，数据像水流一样传输，会存在黏包问题。我的意思是，如果我们可以使用特定应用程序（例如 Nginx）的相同 IP: 端口打开一个套接字，我们就可以劫持内核通过该套接字发送给我们的部分请求。包还提供对 UDP 套接字的支持。
博客
微信小游戏推送（小游戏礼包功能）服务器端接入开发经验总结
06-13 1万+
小游戏开发者的游戏内道具，可通过接入平台「礼包系统」，在微信平台各场景发放游戏礼包。发放场景包括：游戏圈、活动运营工具、发现-游戏-福利中心、广告、搜索等道具礼包发货基于微信小游戏统一的消息推送能力，因此在使用礼包中心的发货回调时，需要开发者服务器处理好消息推送的协议。注意：MP配置消息回调地址只有1个，所有消息推送场景都会使用该通道，所以需要先根据MsgType与Event来判断消息类型，进行相应的处理。下面是发送和返回的格式：更多详情可以查看文档：小游戏礼包 | 微信开放文档。
博客
Unity射击游戏开发教程：（27）创建带有百分比的状态栏
06-12 652
现在，我们需要一些变量到两个将是需要具有序列化字段属性的 UI，因此我们可以在检查器中分配它们，它们将是一个图像（将是我们的填充图像）和一个文本（这将是我们的弹药）计数文本。需要一个带有 int 参数的公共方法，该参数将作为使用的数量，因此当我们射击或使用推进器时，我们可以从玩家脚本中调用它。我们可以使用状态栏，但我们需要重新填充它，这对于弹药栏和推进器栏来说是不同的，因为推进器栏是再生的。跳转到玩家脚本，因为我们将从那里调用此方法，所以我们需要获取弹药栏的句柄，以便我们可以访问我们创建的方法。
博客
【go从入门到精通】精通并发编程-使用atomic管理状态和同步的无锁技术
05-28 696
Go 中的包sync/atomic提供了低级原子内存操作，确保状态更新以原子方式执行，而不受其他 goroutine 的干扰。在必须以原子方式完成多个进程或需要更复杂类型的同步的情况下，可能需要锁和其他同步技术。在 Go 中，原子计数器允许多个 goroutine 安全地更改共享变量，而无需使用锁或任何其他显式同步，这可确保数据完整性并避免竞争条件。大家从结果上就可以看出这差距不是一点点，当然不是所有的场景都无脑式的使用sync/atomic原子包，那我们接下来看下那些场景不适合。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值