[转帖]AnolisOS 入门八:使用keentune(轻豚) 调优系统性能

anolisos,入门,使用,keentune,系统,性能 · 浏览次数 : 0

小编点评

**Anolis 龙蜥社区** **简介** Anolis 是一个性能调优工具,旨在将硬件、软件、操作系统融会贯通,以提高系统的性能。 **安装** 1. 使用 `dnf` 安装软件源 `curl -o /etc/yum.repos.d/anolisos-experimental.repo` 2. 安装 `keentuned`、`keentune-brain`、`keentune-target` 和 `keentune-bench` 等软件 3. 安装 Python 3.6 及以上版本 4. 设置 go 环境变量 5. 启动 `keentuned`、`keentune-brain` 和 `keentune-target` 服务 6. 查看服务状态:`systemctl status keentuned keentune-brain keentune-target keentune-bench` **使用** 1. 使用 `keentune profile list` 查看默认配置 2. 使用 `keentune profile info --name cpu_high_load.conf` 获取 CPU 高负载配置 3. 设置 CPU 高负载配置:`keentune profile set --name cpu_high_load.conf` 4. 使用 `keentune profile rollback` 返回初始状态 **其他** * 使用 `netstat -an | grep 98` 检查端口是否已启动 * 手动调整预置场景参数 * 使用网络预设场景时可能会遇到错误,例如 `net_low_latency` 中的 `net.mtu` 参数

正文

Anolis 龙蜥社区https://openanolis.cn/轻豚主站http://keentune.io/home

注意:使用keentune 前您应当对服务器硬件、Linux核心参数、网络通讯等知识领域有所了解

警告: 错误的使用调试工具,可能会使服务中断,请谨慎使用!

简介:

        性能调优,是一个将硬件、软件、操作系统融会贯通,将性能发挥到极致的过程。通常调校的目标是以用户的期望为依据,因此,调校的目标往往是符合用户的期盼即可。

1.安装:

       最低硬件要求:2核4G 10G可用磁盘空间

        这里使用dnf的方式,单机部署,有能力的同学可以使用源代码(git)编译的方式安装。       

  1. #1.添加软件源
  2. curl -o /etc/yum.repos.d/anolisos-experimental.repo https://gitcode.net/-/snippets/1745/raw/master/anolisos-experimental.repo
  3. #2.安装Keentune 相关软件
  4. dnf install -y keentuned keentune-brain keentune-bench keentune-target
  5. #3.安装依赖软件
  6. dnf install -y python36 python36-devel go
  7. #4.pip切换国内源(可选)
  8. mkdir ~/.pip
  9. curl -o ~/.pip/pip.conf https://gitcode.net/-/snippets/1749/raw/master/pip.conf
  10. #4.安装python3相关软件,注意:至少需要2G以上硬盘空间!!!
  11. pip3 install --upgrade pip
  12. pip3 install numpy==1.19.5 POAP==0.1.26 tornado==6.1 hyperopt==0.2.5 ultraopt==0.1.1 bokeh==2.3.2 requests==2.25.1 pySOT==0.3.3 scikit_learn==0.24.2 paramiko==2.7.2 PyYAML==5.4.1 pynginxconfig
  13. #5.设置go 环境
  14. go env -w GO111MODULE=on
  15. go env -w GOPROXY=https://goproxy.cn,direct

二、启动

  1. #1. 启动keentune相关服务
  2. systemctl start keentuned keentune-brain keentune-target keentune-bench
  3. #1. 查看服务状态
  4. systemctl status keentuned keentune-brain keentune-target keentune-bench
  5. #2.设置开机自动启动(可选)
  6. systemctl enable keentuned keentune-brain keentune-target keentune-bench

使用 netstat -an | grep 98  确认从 9870-9874 的端口都已经开启 

注:如果有端口没有成功启动,请逐一对服务进行排查

三、简单使用

keentune 拥有两种性能调优模式,基于AI 的动态调优和基于预设场景的静态调优,这里我们选择静态调优继续:

通过 keentune profile list 可以看到,已经预设了5种使用场景

  1. cpu_high_load 高CPU负载
  2. io_high_throughput 高IO吞吐量
  3. mysql_tpcc MYSQL 的TPCC优化
  4. net_high_throuput 高网络吞吐量
  5. net_low_latency 网络低延迟
  1. #查看帮助
  2. keentune -h
  3. #查看静态配置
  4. keentune profile list

  1. #查看指定配置的参数
  2. keentune profile info --name cpu_high_load.conf

  1. #使 cpu_high_load 配置生效
  2. keentune profile set --name cpu_high_load.conf

设置成功后可以看到 [ok]状态,共有多少参数设置成功

使用sysctl -a  查看设置成功后的参数(此处以swappiness为例)

 注意:keentune 只是调整了运行值,重启后会恢复原值

恢复初始状态: 

  1. # 恢复初始状态
  2. keentune profile rollback

 

四、其他

1)手动调整预置场景参数

  1. #目录下存放着所有预置场景的配置文件
  2. /etc/keentune/profile

上述目录存放着所有预置场景的配置文件,可以根据自己的经验、服务器配置对预设场景的参数进行手动调整 

2)使用网络预设场景时可能会遇到的问题

  1. #应用 网络高负载或者 低延时场景时
  2. #会遇到如下错误:
  3. keentune profile set --name net_low_latency.conf
  4. [ERROR] profile.Set failed, msg: Prepare before Set err:exec backup failed, err:response suc is false, msg is map[sysctl:sysctl: cannot stat /proc/sys/net/generic-receive-offload: No such file or directory]

 是因为配置文件中的如下参数造成的:

  1. net.mtu: 1500
  2. net.generic-receive-offload: off
  3. net.generic-segmentation-offload: off
  4. net.tcp-segmentation-offload: off

        由于在新的Linux 内核中 网卡的gro、gso、tso 设置已经交由 ethtool 工具来设置,解决方法如下:

        使用vi 等文本编辑工具,将 上述4条内容从 net_low_latency.conf 中删除,再执行如下命令:

  1. #ethtool 关闭 gro gso tso,注:重启后会恢复默认值
  2. #ethtool -K 网卡名称 命令
  3. ethtool -K eth0 gro off
  4. ethtool -K eth0 gso off
  5. ethtool -K eth0 tso off
  6. #设置mtu 1500
  7. echo "1500" > /sys/class/net/eth0/mtu
  8. #启用策略
  9. keentune profile set --name net_low_latency.conf

五、最后

        所谓前人种树后人白嫖,本文志在抛砖引玉,从官方文档可以看出基于AI的动态参数调整才是keentune 的核心价值所在。

参考文献:

https://openanolis.cn/sig/KeenTune

https://gitee.com/anolis/keentuned
https://gitee.com/anolis/keentune_bench
https://gitee.com/anolis/keentune_target
https://gitee.com/anolis/keentune_brain

</article>

与[转帖]AnolisOS 入门八:使用keentune(轻豚) 调优系统性能相似的内容:

[转帖]AnolisOS 入门八:使用keentune(轻豚) 调优系统性能

Anolis 龙蜥社区https://openanolis.cn/轻豚主站http://keentune.io/home 注意:使用keentune 前您应当对服务器硬件、Linux核心参数、网络通讯等知识领域有所了解 警告: 错误的使用调试工具,可能会使服务中断,请谨慎使用! 简介: 性能调优,是

[转帖]AnolisOS8安装ntp同步时间

https://www.wlnmp.com/post-673.html 在AnolisOS8中默认不再支持ntp软件包,时间同步将由chrony来实现,如果你习惯了使用ntp来同步时间,一时难以去适应chrony。 本文将通过wlnmp提供的源,来安装ntp服务 添加wlnmp源 1 rpm -iv

[转帖]

Linux ubuntu20.04 网络配置(图文教程) 因为我是刚装好的最小系统,所以很多东西都没有,在开始配置之前需要做下准备 环境准备 系统:ubuntu20.04网卡:双网卡 网卡一:供连接互联网使用网卡二:供连接内网使用(看情况,如果一张网卡足够,没必要做第二张网卡) 工具: net-to

[转帖]

https://cloud.tencent.com/developer/article/2168105?areaSource=104001.13&traceId=zcVNsKTUApF9rNJSkcCbB 前言 Redis作为高性能的内存数据库,在大数据量的情况下也会遇到性能瓶颈,日常开发中只有时刻

[转帖]ISV 、OSV、 SIG 概念

ISV 、OSV、 SIG 概念 2022-10-14 12:29530原创大杂烩 本文链接:https://www.cndba.cn/dave/article/108699 1. ISV: Independent Software Vendors “独立软件开发商”,特指专门从事软件的开发、生产、

[转帖]Redis 7 参数 修改 说明

2022-06-16 14:491800原创Redis 本文链接:https://www.cndba.cn/dave/article/108066 在之前的博客我们介绍了Redis 7 的安装和配置,如下: Linux 7.8 平台 Redis 7 安装并配置开机自启动 操作手册https://ww

[转帖]HTTPS中间人攻击原理

https://www.zhihu.com/people/bei-ji-85/posts 背景 前一段时间,公司北京地区上线了一个HTTPS防火墙,用来监听HTTPS流量。防火墙上线之前,邮件通知给管理层,我从我老大那里听说这个事情的时候,说这个有风险,然后意外地发现,很多人原来都不知道HTTPS防

[转帖]关于字节序(大小端)的一点想法

https://www.zhihu.com/people/bei-ji-85/posts 今天在一个技术群里有人问起来了,当时有一些讨论(不完全都是我个人的观点),整理一下: 为什么网络字节序(多数情况下)是大端? 早年设备的缓存很小,先接收高字节能快速的判断报文信息:包长度(需要准备多大缓存)、地

[转帖]awk提取某一行某一列的数据

https://www.jianshu.com/p/dbcb7fe2da56 1、提取文件中第1列数据 awk '{print $1}' filename > out.txt 2、提取前2列的文件 awk `{print $1,$2}' filename > out.txt 3、打印完第一列,然后打

[转帖]awk 中 FS的用法

https://www.cnblogs.com/rohens-hbg/p/5510890.html 在openwrt文件 ar71xx.sh中 查询设备类型时,有这么一句, machine=$(awk 'BEGIN{FS="[ \t]+:[ \t]"} /machine/ {print $2}' /