百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

Rust 并行计算, Rayon_rust有两个

haoteby 2025-09-05 23:21 10 浏览

Rayon是Rust的数据并行库。它非常轻量级,可以很容易地将顺序计算转换为并行计算。它还可以避免数据竞争。

Rayon使将顺序迭代器转换为并行迭代器变得非常简单:通常,你只需将 foo.iter() 调用更改为 foo.par_iter(),Rayon就会完成其余的工作:

use rayon::prelude::*;
fn sum_of_squares(input: &[i32]) -> i32 {
    input.par_iter() // <-- just change that!
         .map(|&i| i * i)
         .sum()
}

并行迭代器负责决定如何将数据划分为任务;它将动态适应以获得最大性能。

Rayon 是一个 Rust 的数据并行库,让你可以非常方便地将代码“并行化”,充分利用多核 CPU。

它的核心目标是:

“使数据并行像普通迭代一样易用。”

Rayon 是 Rust 中最流行、最安全的并行库之一。

Rayon 的核心能力

Rayon 主要提供两个核心功能:

1.并行迭代器(Parallel Iterators)

代替 .iter() 或 .into_iter(),你可以用 .par_iter(),并行执行:

use rayon::prelude::*;

let nums = vec![1, 2, 3, 4, 5];

let sum: i32 = nums.par_iter().map(|x| x * 2).sum();  // 并行 map + sum

和 .iter() 一样的 API,但自动分布任务给多个线程。

2.任务并行(spawn / join)

Rayon 也允许你写任务并行逻辑:

use rayon::join;

let (a, b) = join(
    || expensive_computation_1(),
    || expensive_computation_2(),
);

等价于在两个线程中并行运行两个任务,并等两者都完成。

常用 API 示例

并行 map:

let squares: Vec<i32> = (1..1000).into_par_iter()
    .map(|x| x * x)
    .collect();

并行 filter:

let even: Vec<i32> = vec![1, 2, 3, 4, 5, 6].par_iter()
    .filter(|x| *x % 2 == 0)
    .cloned()
    .collect();

并行 reduce(自定义归约):

let result = vec![1, 2, 3, 4, 5].par_iter()
    .cloned()
    .reduce(|| 0, |a, b| a + b);

.par_chunks(n):并行切片

let data = vec![1u8; 1024 * 1024];

data.par_chunks(4096).for_each(|chunk| {
    // 每个线程处理一个 chunk
});

Rayon 的线程池

  • Rayon 内部会自动使用一个 线程池(默认线程数 = CPU 核心数)。
  • 你也可以用 ThreadPoolBuilder 来自定义线程池大小、名字、行为等。

示例:

use rayon::ThreadPoolBuilder;

let pool = ThreadPoolBuilder::new()
    .num_threads(4)
    .build()
    .unwrap();

pool.install(|| {
    // 在这个线程池里运行任务
});

Rayon 的安全性

Rayon 是 数据并行(data parallelism),不是任务并行库如 tokio。
但它的最大特点是:

所有并行代码 在编译时保证线程安全不会发生数据竞争

这归功于 Rust 本身的 Send + Sync + Borrow Checker。

什么时候用 Rayon?

适合场景包括:

场景

例子

CPU 密集型计算

图像处理、文本分析、矩阵乘法

大数组的 map/filter/reduce

数值计算、日志分析等

批量任务并行处理

文件处理、爬虫


Rayon vs tokio

特性

Rayon

tokio

类型

同步多线程并行

异步任务驱动(I/O)

用途

CPU 密集型任务

网络、文件等 I/O 密集型

模型

数据并行 / Fork-Join

异步 Future / Reactor

最小示例:并行求平方和

use rayon::prelude::*;

fn main() {
    let sum: i32 = (1..1_000_000)
        .into_par_iter()
        .map(|x| x * x)
        .sum();

    println!("平方和: {}", sum);
}

相关推荐

引爆朋友圈!我用npx一行命令“偷”光了微信热门文章

嘿,各位朋友们,大家好!怎么优雅地获取微信公众号的热门文章?你可能会说,这不就是爬虫吗?用Pythonrequests+BeautifulSoup,或者Node.jsaxios+che...

Islands Architecture(孤岛架构)在携程新版首页的实践

一、项目背景2022,携程PC版首页终于迎来了首次改版,完成了用户体验与技术栈的全面升级。作为与用户连接的重要入口,旧版PC首页已经陪伴携程走过了22年,承担着重要使命的同时,也遇到了很多问题:...

开源的 Gitee+ 微信小程序,提供仓库浏览、检索等功能

总在用我们国产的码云Gitee代码托管平台,但该平台还没有一个我用着顺手的小程序,于是Gitee+就诞生了。界面截图:仓库地址请在Gitee上搜索“Gitee+”。准备工作在开发Gite...

首例iPhone 15 Pro电池鼓包事件出现 原因可能是过热

iPhone15Pro和iPhone15ProMax的过热问题早已传得沸沸扬扬,一些用户抱怨这两款旗舰机手感过热。不过,他们都没有遇到电池鼓包的问题,直到今天,一位Redditor...

一看就会一搭就废?分享7个亲测有效的穿搭“套路”

晚上好啊~最近写了不少穿搭稿,每次看评论经常能看到这样的留言:眼睛:我已经学会了~手:我有自己的想法。还有同学留言:一看就会,一搭就废。不奇怪!知易行难嘛。明明学了很多穿搭技巧,等到自己要穿的时候就忘...

十个网络安全小技巧 防止个人信息泄漏

随着社会的进步和发展,个人信息泄露事件层出不穷。当个人信息泄漏后,轻则会收到漫天飞舞的短信,重则可能造成经济损失。因此为了不影响正常的生活,需要时时刻刻警惕自己的信息不被泄露。那么如何才能有效地防止个...

2018国家网络安全宣传周系列动漫③丨如何防止电脑被偷窥?这几招教你逮住黑客

来源:光明网2018国家网络安全宣传周系列动漫③——个人电脑安全篇电脑已经成为人们日常重要的工具之一,但电脑安全防护意识却在大众心目中并不完善,再之,信息安全系统的不完善,很容易成为黑客的攻击目标。无...

「网络安全宣传周」送您一份安全上网指南

网络安全学习9月17日-24日是国家网络安全宣传周,今年的主题是“网络安全为人民,网络安全靠人民”。我们作为一名合格的好网民,要具备一定的网络安全知识和网络安全防护技能,更要注意提高网络安全意识,防范...

职场达人都在偷偷用的Excel神技:WEEKDAY函数让日期秒变星期几

你是不是经常需要查看某个日期对应星期几?还在手动翻日历?作为Excel函数专家,今天我要教你一个超实用的技巧——用WEEKDAY函数一键判断日期是周几!这个函数看似简单,但灵活运用能解决工作中的各...

制作 Excel 日历的两种思路:手动创建和 使用公式动态生成

制作Excel日历主要有两种思路:手动创建(简单灵活)和使用公式动态生成(自动更新)。下面我将分别介绍两种方法,并提供详细步骤:...

Web OS 时代就在眼下,只是你还没注意到 App as a Browser 这个事实

这篇文章由36Kr新来的99(1999)后作者Link编译得来。文章作者LukeWroblewski是现任Google产品主管,他此前参与创立的Bagcheck和Polar...

如何在Form表单中添加WebBrowser控件,vba编程学习

vba编程中,如果需要显示某个网页的内容可以使用WebBrowser控件来实现。方法也比较容易,下面介绍一下如何在Form中添加WebBrowser控件。1、打开WindowsExcel,同时按A...

DevExpress Demo示例展示:媲美Excel的电子表格控件

今天介绍一个很强大的电子表格(Spreadsheet)控件:DevExpressSpreadsheetforASP.NETMVC。它是一个仿ExcelUI的电子表格控件,可完全无障碍读写...

Word,Excel,PPTOffice文件Web浏览器预览

前两天接到一个需求:需要在线预览用户上传的Word,Excel,PPT文档前端同事一听到这个需求,心里就开始骂了,什么鬼需求啊,浏览器怎么打开Word,Excel吗?这个要开发一个浏览器插件,这...

web报表工具有什么好推荐_webi报表

接触数据分析,到深入参与企业数字化转型和数据行业建议,已将近8年多,对数据分析、报表工具还是有些个人经验。我从个人的经验角度,和大家说说我用过哪些web报表工具。首先是开源的web报表:BIRTPr...