麒麟系统如何优化编译软件时的多进程并行

云墨同学_1710

云墨同学_1710

2026-09-17

492人浏览

原创

麒麟系统编译卡在链接阶段的根本原因是并行任务数与调度能力不匹配;需先用pidstat区分cpu或io瓶颈,再按make/ninja/msbuild特性调优-j参数,并配合内核调度优化与源码层fork规避。

麒麟系统如何优化编译软件时的多进程并行

麒麟系统编译软件时卡在链接阶段、CPU利用率忽高忽低、整体耗时远超预期,根本原因常是并行任务数与系统调度能力不匹配,而非单纯增加-j参数就能解决。

确认当前构建瓶颈类型

先区分是CPU密集型还是IO密集型拖慢构建:运行pidstat -u 1 -r 1观察1秒内各进程的%usr(用户态CPU)、%sys(内核态CPU)和RSS(内存驻留大小)。若%usr持续低于60%且iowait高于15%,说明磁盘读写成了瓶颈;若%usr接近100%但nvcswch/s(非自愿上下文切换)每秒超5000,则是小进程调度风暴干扰了编译主进程。

这一步不能跳过——盲目调高-j值在IO瓶颈下反而加剧磁盘争抢,在调度瓶颈下则引发更多上下文切换雪崩。

构建系统级并行参数调优

不同构建工具的并行机制差异极大,必须按工具特性设置:

方法一:make系列(含cmake --build)

执行nproc获取逻辑CPU总数,再用free -g | awk 'NR==2{print int($2*0.7)}'估算可用内存GB数。取二者较小值作为-j基础值:内存不足时强行高并发会触发频繁swap,比单线程还慢。

方法二:ninja(推荐优先切换)

ninja默认启用智能并行,无需-j参数。只需确保项目已生成.ninja文件:cmake -G Ninja .. && ninja。它会根据依赖图动态分配任务,对麒麟V10的CFS调度器适配更好,实测比make -j8快22%~37%。

方法三:MSBuild(.NET项目专用)

在麒麟上需用dotnet CLI启动:dotnet build -m:$(nproc) --configuration Release。注意必须加--configuration Release,否则Debug模式下调试信息生成会严重拖慢并行效率。

imgAK AI高清放大器
imgAK AI高清放大器

一款AI图像与设计工具,主要用于imgak AI 图片无损高清放大:让模糊图像重获超清生命力,适合需要提升相关任务效率的用户。

下载

内核调度策略协同优化

第一步:临时禁用节能调频干扰

执行for i in /sys/devices/system/cpu/cpu*/cpufreq/scaling_governor; do echo performance > $i; done,强制所有核心保持最高频率。【此操作必须在编译开始前执行,否则make进程可能被降频核心反复迁移】

第二步:为编译主进程绑定物理核心

启动编译时用taskset隔离资源:taskset -c 0-5 make -j6。这里-c指定的核心范围必须小于等于-j值,且避开0号核心(常被中断和ksoftirqd占用)。

第三步:提升编译进程调度权重

对已启动的make进程,查PID后执行sudo renice -15 PID。不要用-20——该值会使进程抢占实时调度队列,可能卡死SSH终端。

源码层规避fork爆炸

若你控制构建脚本(如CMakeLists.txt中调用execute_process或自研shell包装器),立即替换所有sh -c "sleep 1; do_something"类短命子进程调用。这类脚本每秒fork一次,在麒麟系统上会触发task_struct高频创建销毁,直接推高nvcswch/s。

改用Python内置定时器:python3 -c "import time; time.sleep(1); import os; os.system('do_something')"。单次fork后复用进程空间,上下文切换开销下降90%以上。

这一步修改后,用pidstat -w 1对比调整前后nvcswch/s数值,应看到明显回落。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Python 多线程与异步编程实战
Python 多线程与异步编程实战

本专题系统讲解 Python 多线程与异步编程的核心概念与实战技巧,包括 threading 模块基础、线程同步机制、GIL 原理、asyncio 异步任务管理、协程与事件循环、任务调度与异常处理。通过实战示例,帮助学习者掌握 如何构建高性能、多任务并发的 Python 应用。

2025.12.24

989

20

java多线程相关教程合集
java多线程相关教程合集

本专题整合了java多线程相关教程,阅读专题下面的文章了解更多详细内容。

2026.01.21

303

30

C++多线程相关合集
C++多线程相关合集

本专题整合了C++多线程相关教程,阅读专题下面的的文章了解更多详细内容。

2026.01.21

479

24

C# 多线程与异步编程
C# 多线程与异步编程

本专题深入讲解 C# 中多线程与异步编程的核心概念与实战技巧,包括线程池管理、Task 类的使用、async/await 异步编程模式、并发控制与线程同步、死锁与竞态条件的解决方案。通过实际项目,帮助开发者掌握 如何在 C# 中构建高并发、低延迟的异步系统,提升应用性能和响应速度。

2026.02.06

329

20

C++多线程并发控制与线程安全设计实践
C++多线程并发控制与线程安全设计实践

本专题围绕 C++ 在高性能系统开发中的并发控制技术展开,系统讲解多线程编程模型与线程安全设计方法。内容包括互斥锁、读写锁、条件变量、原子操作以及线程池实现机制,同时结合实际案例分析并发竞争、死锁避免与性能优化策略。通过实践讲解,帮助开发者掌握构建稳定高效并发系统的关键技术。

2026.03.16

173

22

Java 多线程与并发编程实战
Java 多线程与并发编程实战

深入讲解 Java 并发编程体系,涵盖 Thread / Runnable / Callable 线程创建方式、线程生命周期与状态转换、synchronized 同步锁与 Lock/ReentrantLock 显式锁、volatile 可见性保证、ThreadPool 线程池配置与调优(核心参数/拒绝策略)、JUC 并发工具类(CountDownLatch/CyclicBarrier/Semaphore/ConcurrentHashMa

2026.04.17

269

31

C++ 多线程使用教程大全
C++ 多线程使用教程大全

系统讲解 C++11 及后续标准引入的多线程编程能力,涵盖 std::thread 线程创建与生命周期管理、std::mutex / shared_mutex 互斥锁与读写锁、std::condition_variable 条件变量同步、std::atomic 原子操作与内存序(memory_order)、std::future / promise / async 异步任务、线程池的设计与实现、死锁检测与避免策略,帮助开发者编写正确高效

2026.04.28

156

17

Python多线程、多进程与并发编程教程大全
Python多线程、多进程与并发编程教程大全

系统讲解 Python 的并发与并行编程体系,涵盖 GIL 全局解释器锁的原理与影响分析、threading 模块的线程创建/锁/事件/信号量、multiprocessing 模块的进程创建/进程间通信(Queue/Pipe/共享内存)、concurrent.futures 线程池与进程池的统一接口、I/O 密集型与 CPU 密集型任务的方案选择、多线程竞态条件排查与线程安全数据结构、subprocess 子进程管理,帮助开发者根据任务

2026.05.08

134

32

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.1万人学习