Linux性能调优,还可以从这些方面入手

        linux是目前最常用的操作系统,下面是一些常见的 Linux 系统调优技巧,在进行系统调优时,需要根据具体的系统负载和应用需求进行调整,并进行充分的测试和监控,以确保系统的稳定性和性能。同时,调优过程中要谨慎操作,避免对系统造成不良影响。

        其主要调优方向,大概包含几个方面:内存、CPU、i/o  网络调优以及安全性和资源限制。

一、内存调优

1、调整内核参数

        vm.swappiness:控制内核将内存页换出到交换空间的倾向。值越低,系统越倾向于保留内存中的页,减少对交换空间的使用。

        默认情况下,vm.swappiness设置为60,在服务器上,当内存使用率达到40%时就可能会使用交换空间。当你的服务器的RAM充足时,这个值可以适当降低,设置为10或更低,以减少不必要的交换操作。

        修改方法:编辑/etc/sysctl.conf文件,写入vm.swappiness=10

        运行命令sysctl -p使更改生效。

        vm.vfs_cache_pressure:调整内核回收用于目录和 inode 缓存的内存的倾向。较高的值会使内核更积极地回收缓存,释放内存用于其他用途。默认值为 100,可以根据系统负载和内存需求进行调整。

2、使用大页内存

        大页内存可以减少页表的大小,提高内存访问效率。对于内存密集型应用,如数据库,可以显著提高性能。
        启用大页内存需要在系统启动时进行配置,并在应用程序中进行相应的设置。

(1)在Linux系统中,可以通过下面的命令来查看系统是否支持大页内存。

cat /proc/meminfo | grep Hugepagesize

如果输出了大页的大小信息,则说明系统支持大页内存

(2)配置大页内存

临时配置:

sysctl -w vm.nr_hugepages=<number_of_hugepages>

其中 <number_of_hugepages> 是要分配的大页数量,例如大页大小设置为4096

永久配置:

在 /etc/sysctl.conf 文件中添加以下参数:

vm.nr_hugepages=<number_of_hugepages>

保存文件后,使其生效:

sysctl -p

二、CPU 调优

1、调整进程优先级

        使用 nice 和 renice 命令可以调整进程的优先级。较低的优先级数值表示更高的优先级。

        对于关键任务或对响应时间要求较高的进程,可以提高其优先级,确保它们获得更多的 CPU 时间。

        优先级的值范围是 -20 到 19,数值越小,优先级越高。默认情况下,进程以优先级 0 启动。

nice 基本语法:

nice [-n adjustment] command [arguments]

以优先级 5 启动一个名为 test 的程序:nice -n 5 test

renice  命令用于调整正在运行的进程的优先级。

基本语法:

renice priority [-p] pid... 或 renice priority [-g] pgrp... 或 renice priority [-u] user...
  • 其中,priority 是要设置的新优先级,pid 是进程 ID,pgrp 是进程组 ID,user 是用户名。
  • 例如,将进程 ID 为 1234 的进程优先级调整为 10:renice 10 -p 1234

注意:只有 root 用户可以将进程优先级设置为负值,以提高进程的优先级,普通用户只能减低进程的优先级或者保持不变。

2、绑定 CPU 核心

        通过 taskset 命令或在启动应用程序时指定 CPU 亲和性,可以将特定的进程绑定到特定的 CPU 核心上。

        这可以避免进程在不同的 CPU 核心之间频繁切换,提高 CPU 缓存的命中率,从而提高性能。

查询进程的CPU亲和性:

taskset -p <pid>

<pid> 是进程的ID 

设置进程的CPU亲和性:

taskset -cp <cpuset> <pid>

<cpuset> 是一个用逗号分隔的CPU核心列表, <pid> 是进程的ID

例如:将进程 ID 为 1234 的进程绑定到 CPU 核心 0 和 1 上运行:taskset -cp 0,1 1234

启动新进程时设置CPU亲和性:

taskset <cpuset> <command> [arguments]

<cpuset> 是一个用逗号分隔的 CPU 核心列表,<command> 是要执行的命令,<arguments> 是命令的参数。

例如,启动一个名为 test 的程序,并将其绑定到 CPU 核心 2 和 3 上运行:taskset 2,3 test

三、磁盘 I/O 调优

1、使用 SSD 硬盘

        SSD 硬盘具有更快的读写速度和更低的访问延迟,可以显著提高系统的磁盘 I/O 性能。

        如果可能,可以将关键数据和频繁访问的文件存储在 SSD 上。

对于SSD存储,通常推荐使用none或deadline调度器;对于HDD,则cfq或bfq可能更适合。
检查当前使用的调度器:

cat /sys/block/sda/queue/scheduler

更改调度器:

echo deadline > /sys/block/sda/queue/scheduler

禁用访问时间更新:
        在挂载选项中加入noatime以避免每次文件被读取时都更新访问时间戳,这样可以减少不必要的磁盘I/O。
        编辑/etc/fstab,修改相关分区条目,例如UUID=... / ext4 defaults,noatime 0 1

2、调整文件系统参数

        对于不同的文件系统,可以调整一些参数来优化磁盘 I/O 性能。例如,对于 ext4 文件系统,可以调整 block sizeinode size 等参数。

Ext 文件系统系列(如 Ext4)

  • 在创建文件系统时,可以使用特定的工具和选项来调整块大小和其他参数。例如,使用 mkfs.ext4 命令时,可以通过 -b 选项指定块大小,如 -b 4096 设置块大小为 4KB。
  • inode size 通常不是一个直接可配置的选项,但可以通过调整文件系统的总体布局和存储策略来间接影响 inode 的使用和分配。

XFS 文件系统

  • 使用 mkfs.xfs 命令创建文件系统时,可以通过 -b size= 选项设置块大小,例如 -b size=8192 设置块大小为 8KB。
  • inode 大小通常是根据文件系统的创建参数和存储需求自动调整的,一般情况下不太容易直接指定具体的 inode size。

3、使用磁盘缓存

        Linux 系统的磁盘缓存可以提高磁盘 I/O 的性能。可以通过调整内核参数 vm.dirty_background_ratio 和 vm.dirty_ratio 来控制磁盘缓存的行为。

        vm.dirty_background_ratio 表示当内存中的脏页达到系统内存的一定比例时,内核开始将脏页异步写入磁盘。

        vm.dirty_ratio 表示当内存中的脏页达到系统内存的更高比例时,内核将阻塞所有的写操作,直到脏页被写入磁盘。

临时调整:

sysctl vm.dirty_background_ratio=10
sysctl vm.dirty_ratio=20

永久调整:

  编辑  /etc/sysctl.conf  文件,添加下面设置:

vm.dirty_background_ratio = 10
vm.dirty_ratio = 20

保存文件后,使用 sudo sysctl -p 命令使更改生效。

四、网络调优

1、调整网络缓冲区大小

  • 可以通过调整内核参数 net.core.rmem_maxnet.core.wmem_maxnet.ipv4.tcp_rmem 和 net.ipv4.tcp_wmem 来调整网络接收和发送缓冲区的大小。
  • 较大的缓冲区可以提高网络吞吐量,但也可能会增加内存的使用。

net.core.rmem_max:
        定义了内核套接字接收缓冲区的最大大小。这个参数决定了系统在接收网络数据时可以使用的最大缓冲区空间。
net.core.wmem_max:
        定义了内核套接字发送缓冲区的最大大小。它控制了系统在发送网络数据时可以使用的最大缓冲区空间。
net.ipv4.tcp_rmem:
        这个参数是一个包含三个整数值的数组,用于设置 TCP 接收缓冲区的最小、默认和最大大小。例如,4096 87380 6291456表示最小接收缓冲区大小为 4096 字节,默认大小为 87380 字节,最大大小为 6291456 字节。
net.ipv4.tcp_wmem:
        与net.ipv4.tcp_rmem类似,也是一个包含三个整数值的数组,用于设置 TCP 发送缓冲区的最小、默认和最大大小。

临时调整:

sysctl -w net.core.rmem_max=<value>
sysctl -w net.core.wmem_max=<value>
sysctl -w net.ipv4.tcp_rmem=<min>,<default>,<max>
sysctl -w net.ipv4.tcp_wmem=<min>,<default>,<max>

永久调整:

编辑  /etc/sysctl.conf  文件,添加下面设置:

     net.core.rmem_max=<value>
     net.core.wmem_max=<value>
     net.ipv4.tcp_rmem=<min>,<default>,<max>
     net.ipv4.tcp_wmem=<min>,<default>,<max>

保存文件后,使用sudo sysctl -p命令使更改生效。

2、启用网络流量控制

        使用 tc(Traffic Control)工具可以对网络流量进行整形和控制。可以限制特定的网络接口或 IP 地址的带宽使用,确保关键服务的网络带宽得到保障。

3、优化网络协议栈

        对于特定的网络应用,可以调整网络协议栈的参数来提高性能。例如,对于 Web 服务器,可以调整 tcp_tw_reuse 和 tcp_tw_recycle 等参数来优化 TCP 连接的回收和重用。

tcp_tw_reuse:
        这个参数允许在 TIME_WAIT 状态的连接被重新用于新的连接。当设置为 1 时,内核会在安全的情况下(例如连接的时间戳符合要求等)将处于 TIME_WAIT 状态的连接重新分配给新的连接请求。
        启用这个参数可以减少 TIME_WAIT 状态的连接数量,从而节省系统资源,特别是在高并发的服务器环境中。
tcp_tw_recycle:
        这个参数开启快速回收 TIME_WAIT 状态的连接。当设置为 1 时,内核会更快地回收 TIME_WAIT 状态的连接,以减少连接资源的占用。
        但是,在一些网络环境中,开启这个参数可能会导致连接问题,特别是在网络地址转换(NAT)环境下,可能会导致数据包丢失和连接失败。

临时调整:

sysctl -w net.ipv4.tcp_tw_reuse=1
sysctl -w net.ipv4.tcp_tw_recycle=1

永久调整:

编辑  /etc/sysctl.conf  文件,添加下面设置:

net.ipv4.tcp_tw_reuse=1
net.ipv4.tcp_tw_recycle=1

保存文件后,使用sudo sysctl -p命令使更改生效。

五、安全性和资源限制

        一般用在需要确保只有特定用户可以执行某些敏感操作,同时控制每个用户的资源消耗。

1、使用ulimit限制资源

        可以在用户的shell初始化脚本中设置ulimit指令,例如限制打开文件数、进程数等。

在 /etc/security/limits.conf 中定义全局或用户特定的资源限制。

临时调整:

ulimit -n 2048

永久调整:

编辑  /etc/security/limits.conf   文件添加设置:

/etc/security/limits.conf文件的每一行都包含四个字段,分别是:

  1. <domain>:指定限制的范围,可以是用户名、用户组名或通配符*表示全局范围。
  2. <type>:限制的类型,可以是soft(软限制)、hard(硬限制)或-(同时设置软限制和硬限制)。
  3. <item>:要限制的资源项,例如nofile(最大打开文件数)、nproc(最大进程数)等。
  4. <value>:资源限制的值。

例如:以下行表示将用户myuser的最大打开文件数软限制设置为 1024,硬限制设置为 2048:

myuser soft nofile 1024
myuser hard nofile 2048

保存文件后,通常需要用户重新登录才能生效。已经运行的进程,这些限制不会立即生效。

2、利用cgroups管理资源

cgroups(Control Groups)提供了一种机制来限制、记录和隔离进程组的资源使用情况。

创建cgroup目录结构并在其中设置相应的资源控制策略,如CPU份额、内存上限等。

创建cgroup目录:

        可以在 /sys/fs/cgroup/ 目录下创建。例如,创建一个名为  test 的 cgroup:

mkdir /sys/fs/cgroup/mygroup

设置资源控制策略:

        CPU份额控制:

                CPU 份额表示在多个 cgroup 之间分配 CPU 资源的比例。

                例如,设置CPU 份额为512 (相对权重):

echo 512 > /sys/fs/cgroup/mygroup/cpu.weight

        内存上限控制:

                设置内存上限可以限制cgroup中进程使用的内存总量:

                例如:设置内存上限为1GB :

echo 1073741824 > /sys/fs/cgroup/mygroup/memory.limit_in_bytes

将进程添加到cgroup 

        找到要添加到 cgroup 的进程 ID(PID)。可以使用命令如pstop来查找进程 ID。

将进程添加到cgroup

echo <pid> > /sys/fs/cgroup/mygroup/tasks

注意:在操作cgroups 时,可能需要使用管理员权限,确保你有足够的权限来创建和修改 cgroup 目录及设置资源控制策略。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/892236.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

第二十一节 图像旋转

void QUickdemo::roate_demo(Mat& image) { Mat dst, M; int w image.cols; int h image.rows; M getRotationMatrix2D(Point2f(w / 2, h / 2), 45, 1.0);--M getRotationMatrix2D(Point2f(w / 2, h / 2), 45, 1.0);&#xff1a;使用getRotationMatrix…

Linux学习网络编程学习(TCP和UDP)

文章目录 网络编程主要函数介绍1、socket函数2、bind函数转换端口和IP形式的函数 3、listen函数4、accept函数网络模式&#xff08;TCP&UDP&#xff09;1、面向连接的TCP流模式2、UDP用户数据包模式 编写一个简单服务端编程5、connect函数编写一个简单客户端编程 超级客户端…

jmeter入门:脚本录制

1.设置代理。 网络连接-》代理-》手动设置代理. ip&#xff1a; 127.0.0.1&#xff0c; port&#xff1a;8888 2. add thread group 3. add HTTP(s) test script recorder, target controller chooses Test plan-> thread Group 4. click start. then open the browser …

Windows环境下Qt Creator调试模式下qDebug输出中文乱码问题

尝试修改系统的区域设置的方法&#xff1a; 可以修复问题。但会出现其它问题&#xff1a; 比如某些软件打不开&#xff0c;或者一些软件界面的中文显示乱码&#xff01; 暂时没有找到其它更好的办法。

k8s的微服务

ipvs模式 Service 是由 kube-proxy 组件&#xff0c;加上 iptables 来共同实现的 kube-proxy 通过 iptables 处理 Service 的过程&#xff0c;需要在宿主机上设置相当多的 iptables 规则&#xff0c;如果宿主机有大量的Pod&#xff0c;不断刷新iptables规则&#xff0c;会消耗…

FreeRTOS应用开发学习

了解FreeRTOS 任务相关API FreeRTOS任务创建API FreeRTOS 中&#xff0c;任务的创建有两种方法&#xff0c;一种是使用动态创建&#xff0c;一种是使用静态创建。动态创建时&#xff0c;任务控制块和栈的内存是创建任务时动态分配的&#xff0c;任务删除时&#xff0c;内存可…

推动AI技术研发与应用,景联文科技提供专业高效图像采集服务

景联文科技提供专业图像采集服务&#xff0c;涵盖多个领域的应用需求。 包含人体图像、人脸图像、手指指纹、手势识别、交通道路、车辆监控等图像数据集&#xff0c;计算机视觉图像数据集超400TB&#xff0c;支持免费试采试标。 高质量人像采集服务&#xff1a;支持不同光线条件…

2024年10月16日练习

一.回文数&#xff1a; 思路一&#xff1a; 负数肯定就不是回文数了&#xff0c;所以负数就直接返回flase&#xff0c;正数的话就一位位分解&#xff0c;然后构成一个 新的整数&#xff0c;然后去判断两者是否相等即可&#xff1a; bool isPalindrome(int x) {if (x<0){r…

阿里Dataworks使用循环节点和赋值节点完成对mongodb分表数据同步

背景 需求将MongoDB数据入仓MaxCompute 环境说明 MongoDB 100个Collections&#xff1a;orders_1、orders_2、…、orders_100 前期准备 1、MongoDB数据源配置 需要先保证DW和MongoDB网络是能够联通的&#xff0c;需要现在集成任务中配置MongoDB的数据源信息。 具体可以查…

SldWorks问题 2. 矩阵相关接口使用上的失误

问题 在计算三维点在图纸&#xff08;DrawingDoc&#xff09;中的位置时&#xff0c;就是算不对&#xff0c;明明就4、5行代码&#xff0c;怎么看都是很“哇塞”的&#xff0c;毫无问题的。 但结果就是不对。 那就调试一下吧&#xff0c;调试后发现生成的矩阵很不对劲&#…

数学建模算法与应用 第15章 预测方法

目录 15.1 微分方程模型 Matlab代码示例&#xff1a;求解简单的微分方程 15.2 灰色预测模型&#xff08;GM&#xff09; Matlab代码示例&#xff1a;灰色预测模型 15.3 自回归模型&#xff08;AR&#xff09; Matlab代码示例&#xff1a;AR模型的预测 15.4 指数平滑法 M…

论文阅读-U3M(2)

HOW MUCH POSITION INFORMATION DO CONVOLUTIONAL NEURAL NETWORKS ENCODE? 文章目录 HOW MUCH POSITION INFORMATION DO CONVOLUTIONAL NEURAL NETWORKS ENCODE?前言一、位置编码网络&#xff08;PosENet&#xff09;二、训练数据三、实验3.1 位置信息的存在性3.2 分析PosEN…

单片机原理及应用笔记:C51的运算符与项目实践

单片机原理及应用笔记 作者简介 李永康&#xff0c;男&#xff0c;银川科技学院计算机与人工智能学院&#xff0c;2022级计算机与科学技术9班本科生&#xff0c;单片机原理及应用课程第7组。 指导老师&#xff1a;王兴泽 电子邮件&#xff1a;3214729183qq.com 个人CSDN主…

学习 PostgreSQL + Spring Boot 3 +mybatisplus整合过程中的报错记录

今天计划学习 PostgreSQL&#xff0c;并顺便尝试使用 Spring Boot 3.x 框架&#xff0c;打算整合 Spring Boot 3、PostgreSQL 和 MyBatis-Plus。整合后一直出现以下报错&#xff1a; 去AI上面搜了讲的是sqlSessionFactory 或 sqlSessionTemplate 没有正确配置 初始分析&#…

linux提权【笔记总结】

文章目录 信息收集通过命令收集信息内核&#xff0c;操作系统&#xff0c;设备信息等用户信息环境信息进程与服务安装的软件服务与插件计划任务查看是否存在明文密码查看与主机的通信信息查看日志信息 通过脚本收集信息LinEnum脚本介绍复现 Linuxprivchecker复现 linux-exploit…

URDF统一机器人建模语言

统一机器人建模语言 URDF&#xff08;Unified Robot Description Format&#xff09;统一机器人描述格式&#xff0c;URDF使用XML格式描述机器人文件。 我们从下面四个方面介绍URDF&#xff1a; URDF的组成介绍 URDF-Link介绍 URDF-Joint介绍 创建一个简单的URDF…

目标检测指标:AP,mAP

目标检测指标&#xff1a;AP&#xff0c;mAP 论文&#xff1a;A Survey on Performance Metrics for Object-Detection Algorithms 文章目录 目标检测指标&#xff1a;AP&#xff0c;mAP摘要1 介绍2 主要的性能指标TP、FP、FNP、RAP A P 11 AP_{11} AP11​ A P a l l AP_{all}…

Chromium HTML Tags与c++接口对应关系分析

一、HTML 标签(HTML Tags) <a> <head> <img>等等这些标签在c中的接口是如何定义和查找的呢&#xff1f; 更多标签参考&#xff1a; HTML <a> target 属性 (w3school.com.cn) 二、html_tag_names.json5 (third_party\blink\renderer\core\html\htm…

基于SpringBoot的体育商城购物系统

作者&#xff1a;计算机学姐 开发技术&#xff1a;SpringBoot、SSM、Vue、MySQL、JSP、ElementUI、Python、小程序等&#xff0c;“文末源码”。 专栏推荐&#xff1a;前后端分离项目源码、SpringBoot项目源码、Vue项目源码、SSM项目源码、微信小程序源码 精品专栏&#xff1a;…

【AI大模型】初识LangChain:功能强大的语言模型框架

目录 &#x1f354; 什么是LangChain &#x1f354; LangChain主要组件 2.1 Models 2.1.1 LLMs (大语言模型) 2.1.2 Chat Models (聊天模型) 2.1.3 提示模板 2.1.4 Embeddings Models(嵌入模型) 2.2 Prompts 2.3 Chains(链) 2.4 Agents (代理) 2.5 Memory 2.6 Inde…