【Rust日报】2023-07-31 Rust中的高吞吐量流处理

Rust中的高吞吐量流处理

这篇文章主要介绍了Rust中流处理的概念、方法和优化。作者介绍了流处理的基本概念，以及Rust中常用的流处理库，并使用这些库实现了一个流处理程序。最后，作者介绍了如何通过测量空闲和阻塞时间来优化流处理程序的性能。

作者还提供了一些其他的优化建议，例如：

• 在实际系统中，应该考虑将线程固定到CPU内核上，或者使用一种版本的绿色线程来减少上下文切换。

• 在处理流时，通常需要为结果分配内存。内存分配是昂贵的，所以在以后的文章中，作者将会介绍一些优化内存分配的方法。

原文链接：https://noz.ai/hash-pipeline/

一个无锁 Vector

这篇文章介绍了一种实现并发向量的方法。该方法使用一个共享计数器来分配下一个元素的索引，并使用一个原子标志来表示元素是否已初始化。这种方法完全是无锁的，并且可以实现非常cheap的读取操作。

文章还介绍了如何在内存中存储并发向量。最简单的方法是使用一个链表，但是这种方法会导致随机访问的性能很差。另一种方法是预先分配一个数组，并在需要时延迟分配每个元素。这种方法可以通过使用leading zeros指令来有效地计算元素的索引。

文章最后讨论了如何在并发向量中实现写操作。最简单的方法是使用一个Mutex来同步对chunk的分配。另一种方法是使用一个lock-free的算法，但是这种方法在高并发的情况下可能会导致不必要的开销

原文链接：https://ibraheem.ca/posts/a-lock-free-vector/

iced 0.10发布

iced 是一个 Rust 跨平台 GUI 库, 拥有 20k⭐️. 他拥有以下特性.

• 简单、易用、开箱即用的 API

• 类型安全、响应式编程模型

• 跨平台支持（Windows、macOS、Linux 和 Web）

• 响应式布局

• 内置小部件（包括文本输入、可滚动控件等）

• 自定义小部件支持（创建您自己的！）

• 带有性能指标的调试叠加层

• 对异步操作（使用 futures！）的首选支持

• ...

目前 0.10 版本发布.

原文链接：https://github.com/iced-rs/iced/releases/tag/0.10.0

dui: 一个可交互的 du

dui 是一个可交互式的 du 命令的实现. 可以让你更快的发现哪个目录占据了大量的磁盘.

┗⊟ ".": 27.2 KB (100.00%)
  ┣⊟ "src": 23.5 KB (86.48%)
  ┃ ┣⊟ "cli": 17.9 KB (76.35%)
  ┃ ┃ ┣⊡ "render.rs": 9.1 KB (50.55%)
  ┃ ┃ ┣⊡ "handler.rs": 5.3 KB (29.66%)
  ┃ ┃ ┗⊡ "mod.rs": 3.4 KB (18.92%)
  ┃ ┣⊡ "crawl.rs": 3.8 KB (16.38%)
  ┃ ┣⊡ "main.rs": 1.5 KB (6.36%)
  ┃ ┗⊡ "lib.rs": 28 B (0.12%)
  ┣⊡ "README.md": 1.1 KB (4.19%)
  ┣⊡ "LICENSE": 1 KB (3.82%)
  ┣⊡ "TODO.org": 453 B (1.63%)
  ┣⊡ "Cargo.toml": 451 B (1.62%)
  ┗⊡ "rustfmt.toml": 247 B (0.89%)

原文链接：https://stegosaurusdormant.com/dui/

--

From 日报小组 FBI小白

社区学习交流平台订阅：

• Rustcc论坛: 支持rss

• 微信公众号：Rust语言中文社区