Linux服务进程性能调优指南

1. 性能分析工具

1.1 系统级监控工具

• top/htop - 实时查看系统资源使用情况
• vmstat - 查看内存、CPU、IO等系统性能指标
• iostat - 监控磁盘I/O性能
• netstat/ss - 网络连接和统计信息
• dstat - 综合性能监控工具

1.2 进程级分析工具

• strace - 跟踪系统调用和信号
• ltrace - 跟踪库函数调用
• perf - Linux性能分析工具
• valgrind - 内存调试和性能分析

2. CPU优化

2.1 识别CPU瓶颈

• 使用top查看CPU使用率
• 使用perf top查看热点函数
• 使用pidstat -u监控特定进程CPU使用

2.2 优化策略

• 调整进程优先级：nice和renice命令
• CPU亲和性：taskset绑定进程到特定CPU核心
• 中断平衡：irqbalance服务
• 编译器优化：使用-O2/-O3优化级别编译

3. 内存优化

3.1 识别内存问题

• free -m查看内存使用
• vmstat -s查看内存统计
• pmap -x <pid>查看进程内存映射

3.2 优化策略

• 调整swappiness：sysctl vm.swappiness=10
• 透明大页(THP)：评估是否禁用echo never > /sys/kernel/mm/transparent_hugepage/enabled
• OOM killer调整：/proc/<pid>/oom_score_adj
• 内存分配器优化：考虑使用jemalloc或tcmalloc替代glibc malloc

4. I/O优化

4.1 识别I/O瓶颈

• iostat -x 1查看磁盘I/O
• iotop查看进程I/O使用
• dmesg | grep -i "i/o"查看I/O错误

4.2 优化策略

• I/O调度器选择：echo deadline > /sys/block/sda/queue/scheduler
• 文件系统优化：调整ext4挂载选项如noatime,nodiratime
• 预读设置：blockdev --setra 1024 /dev/sda
• 异步I/O：考虑使用libaio

5. 网络优化

5.1 识别网络问题

• netstat -s查看网络统计
• ss -s查看套接字统计
• ethtool -S eth0查看网卡统计

5.2 优化策略

• TCP参数调整： bash sysctl -w net.ipv4.tcp_tw_reuse=1 sysctl -w net.ipv4.tcp_fin_timeout=30 sysctl -w net.core.somaxconn=4096
• 网卡队列：调整多队列ethtool -L eth0 combined 8
• 巨帧：ifconfig eth0 mtu 9000

6. 应用级优化

6.1 配置优化

• 调整服务配置文件中的连接池大小
• 优化缓存大小和策略
• 调整线程/进程数量

6.2 代码级优化

• 减少系统调用次数
• 使用更高效的算法
• 批量处理代替频繁小操作
• 避免不必要的内存拷贝

7. 系统参数调优

7.1 内核参数

# 文件描述符限制
sysctl -w fs.file-max=1000000
ulimit -n 1000000

# 网络相关
sysctl -w net.ipv4.tcp_max_syn_backlog=8192
sysctl -w net.ipv4.tcp_syncookies=1
sysctl -w net.ipv4.tcp_max_tw_buckets=2000000

7.2 服务限制

• 调整/etc/security/limits.conf
• 调整systemd服务限制/etc/systemd/system.conf

8. 持续监控与调优

• 建立性能基准
• 实施监控告警
• 定期性能测试
• 使用APM工具如New Relic、Datadog等

性能调优是一个持续的过程，需要根据实际负载变化不断调整。建议每次只调整一个参数并观察效果，避免同时修改多个参数导致难以确定影响源。