重温 MPI- -性能数据
MemFree: 16600 kB <= 所有Zone的空闲内存总数 (DMA+Normal+High)
Buffers: 74064 kB <= 不与具体文件对应的缓冲页面
Cached: 631356 kB <= 和具体文件对应的缓冲页面 (pagecache-buffers-swapcache)
SwapCached: 0 kB <= swap cache
Active: 852132 kB
Inactive: 102244 kB
HighTotal: 130688 kB
HighFree: 784 kB
LowTotal: 901360 kB
LowFree: 15816 kB
SwapTotal: 514040 kB
SwapFree: 514040 kB
Dirty: 184 kB
Writeback: 0 kB
Mapped: 329292 kB
Slab: 49104 kB
Committed_AS: 636328 kB
PageTables: 4664 kB
VmallocTotal: 106488 kB
VmallocUsed: 2640 kB
VmallocChunk: 103488 kB
HugePages_Total: 0
HugePages_Free: 0
Hugepagesize: 4096 kB
vmstat = "Virtual Memory Statistics". 虽然从名称上看是收集有关内存管理系统性能数据的，但其实vmstat还提供进程，CPU, 磁盘I/O等其他性能数据：
参考资料">
基准测试工具
性能数据
MemFree: 16600 kB <= 所有Zone的空闲内存总数 (DMA+Normal+High)
Buffers: 74064 kB <= 不与具体文件对应的缓冲页面
Cached: 631356 kB <= 和具体文件对应的缓冲页面 (pagecache-buffers-swapcache)
SwapCached: 0 kB <= swap cache
Active: 852132 kB
Inactive: 102244 kB
HighTotal: 130688 kB
HighFree: 784 kB
LowTotal: 901360 kB
LowFree: 15816 kB
SwapTotal: 514040 kB
SwapFree: 514040 kB
Dirty: 184 kB
Writeback: 0 kB
Mapped: 329292 kB
Slab: 49104 kB
Committed_AS: 636328 kB
PageTables: 4664 kB
VmallocTotal: 106488 kB
VmallocUsed: 2640 kB
VmallocChunk: 103488 kB
HugePages_Total: 0
HugePages_Free: 0
Hugepagesize: 4096 kB
vmstat = "Virtual Memory Statistics". 虽然从名称上看是收集有关内存管理系统性能数据的，但其实vmstat还提供进程，CPU, 磁盘I/O等其他性能数据：
/proc/meminfo
MemTotal: 1032048 kB <= 所有物理内存-保留内存-核心代码MemFree: 16600 kB <= 所有Zone的空闲内存总数 (DMA+Normal+High)
Buffers: 74064 kB <= 不与具体文件对应的缓冲页面
Cached: 631356 kB <= 和具体文件对应的缓冲页面 (pagecache-buffers-swapcache)
SwapCached: 0 kB <= swap cache
Active: 852132 kB
Inactive: 102244 kB
HighTotal: 130688 kB
HighFree: 784 kB
LowTotal: 901360 kB
LowFree: 15816 kB
SwapTotal: 514040 kB
SwapFree: 514040 kB
Dirty: 184 kB
Writeback: 0 kB
Mapped: 329292 kB
Slab: 49104 kB
Committed_AS: 636328 kB
PageTables: 4664 kB
VmallocTotal: 106488 kB
VmallocUsed: 2640 kB
VmallocChunk: 103488 kB
HugePages_Total: 0
HugePages_Free: 0
Hugepagesize: 4096 kB
重点工具介绍
vmstat
是procps项目中的一员，除了ps, top, kill之外，procps还提供很多有用的工具，比如: watch, pmap等。vmstat = "Virtual Memory Statistics". 虽然从名称上看是收集有关内存管理系统性能数据的，但其实vmstat还提供进程，CPU, 磁盘I/O等其他性能数据：
procs -----------memory---------- ---swap-- -----io---- --system-- ----cpu----
r b swpd free buff cache si so bi bo in cs us sy id wa
0 0 105128 232828 29852 405364 11 27 58 50 1125 821 6 1 91 1
0 0 105128 232828 29860 405364 0 0 0 72 1090 301 3 0 96 1
- 进程
- r - 正在等待CPU的进程数目(包括正在运行的进程)，也就是run-queue的大小。
- b - 处于不可中断睡眠状态的进程数目。比如等待I/O完成。
- 内存
- swpd - 交换分区中已经被使用的交换内存大小。
- free - 空闲内存大小
- buff - 用于写缓冲的内存大小
- cache - 用于读缓冲的内存大小
- 交换分区
- si - 每秒交换入内存页
- sw - 每秒交换出内存页
- I/O
- bi - 每秒从块设备中读入的块数
- bo - 每秒向块设备中写入的块数
- 系统
- in - 每秒发出中断数目
- cs - 每秒进行上下文切换时间
- CPU
- us - 用户时间百分比
- sy - 系统时间百分比
- id - 空闲时间百分比
- wa - IO等待时间百分比
- 2.4核心
- 只有 user, nice, system, idle
- us = user+nice
- sy = system
- id = idle
- irq = softirq = wa = 0
- 2.6核心
- 有 user, nice, system, idle, iowait, irq, softirq
- us = user+nice
- sy = system+irq+softirq
- id = idle+iowait
Rule of Thumb
现象 | 说明 | 解决方案 |
运行队列个数 >> CPU个数 | CPU是系统性能瓶颈 |
|
swap-io, swap-out较高 | 内存压力较大 |
|
误解问题 | 用户的描述有时会有岐义 | 从多个角度问同一个问题 |
小技巧
- 更好的ps结果输出
- ps -eo user,pid,ppid,%cpu,%mem,vsz,rss,tty,stat,start,time,wchan,command --forest
- ps -emo user,pid,ppid,%cpu,%mem,vsz,rss,tty,stat,start,time,wchan,command
- top -id 1
- watch
- 仔细记录
- free's free != real free
- try truss
Case Study
- ICBC
- china news (Oracle 9.2.0.1)
- 内存泄漏检查
ToDo
- strace, ltrace 原理
- hdparm 原理
- try kprobes/dprobes
- try LKST
- try kdb
- sysctl
- cook the sar result a little bit more:
- average CPU time (user, sys, iowait)
- peak CPU time (what? when?)
- average run queue size
- peak run queue size
- network send/recv
- I/O read/write
- used memory size
参考资料">
Linux性能优化- -
优化步骤
- 确定优化目标
- 收集性能数据
- 分析，做出假设
- 进一步收集数据证明或否定假设
- 调整系统
硬件性能
- CPU
- /proc/cpuinfo
- bit: uname -m
- 个数：cat /proc/cpuinfo | grep processor | wc
- 主频：cat /proc/cpuinfo | grep "cpu MHz"
- BogoMIPS: cat /var/log/dmesg | grep BogoMIPS
- Memory
- /proc/meminfo
- level 1 and leve 2 cache
- free
- I/O
- hdparm -Tt [device]
性能工具
- 进程：top, ps, pmap, pstack
- 内存：vmstat, free
- 磁盘：iostat, hdparm
- 网络：netstat, tcpdump, MRTG, pmacct, ntop
- 其他：strace, ltrace, oprofile, dprobes, performance inspector, isag, LKST, sysctl, syslog
apache
- http://httpd.apache.org/docs-2.0/misc/perf-tuning.html
基准测试工具
- linpack
- http://www.netlib.org/utk/people/JackDongarra/faq-linpack.html
- 运行一些浮点矩阵运算
- 主要测量CPU浮点计算能力，也受到内存带宽的影响。
- top500.org用的是linpack
- 测量方法：
- wget http://www.netlib.org/benchmark/linpackc
- cc -DDP -DUNROLL -O2 linpackc -lm -o linpack
- ./linpack
- 测量结果：
- 我的ASUS V6800V (PentiumM 2.0G) 的linpack结果为：340Mflops
- 我的desktop (Celeron 1.7G) 的结果为：200Mflops
- builder (4 Xeon 3.4G) 的结果为：680Mflops
- 目前世界第一的Blue Genes的结果为：70720Gflops (Rmax)
- 曙光4000A的结果为：8061Gflops (Rmax)
- nbench
- 运行一些典型算法
- 测量整数、浮点以及内存性能
- iozone
- bonnie++
- netbench
- tiobench
- loadrunner
- mysql-bench
- apache bench (AB)
性能数据
/proc/meminfo
MemTotal: 1032048 kB <= 所有物理内存-保留内存-核心代码MemFree: 16600 kB <= 所有Zone的空闲内存总数 (DMA+Normal+High)
Buffers: 74064 kB <= 不与具体文件对应的缓冲页面
Cached: 631356 kB <= 和具体文件对应的缓冲页面 (pagecache-buffers-swapcache)
SwapCached: 0 kB <= swap cache
Active: 852132 kB
Inactive: 102244 kB
HighTotal: 130688 kB
HighFree: 784 kB
LowTotal: 901360 kB
LowFree: 15816 kB
SwapTotal: 514040 kB
SwapFree: 514040 kB
Dirty: 184 kB
Writeback: 0 kB
Mapped: 329292 kB
Slab: 49104 kB
Committed_AS: 636328 kB
PageTables: 4664 kB
VmallocTotal: 106488 kB
VmallocUsed: 2640 kB
VmallocChunk: 103488 kB
HugePages_Total: 0
HugePages_Free: 0
Hugepagesize: 4096 kB
重点工具介绍
vmstat
是procps项目中的一员，除了ps, top, kill之外，procps还提供很多有用的工具，比如: watch, pmap等。vmstat = "Virtual Memory Statistics". 虽然从名称上看是收集有关内存管理系统性能数据的，但其实vmstat还提供进程，CPU, 磁盘I/O等其他性能数据：
procs -----------memory---------- ---swap-- -----io---- --system-- ----cpu----
r b swpd free buff cache si so bi bo in cs us sy id wa
0 0 105128 232828 29852 405364 11 27 58 50 1125 821 6 1 91 1
0 0 105128 232828 29860 405364 0 0 0 72 1090 301 3 0 96 1
- 进程
- r - 正在等待CPU的进程数目(包括正在运行的进程)，也就是run-queue的大小。
- b - 处于不可中断睡眠状态的进程数目。比如等待I/O完成。
- 内存
- swpd - 交换分区中已经被使用的交换内存大小。
- free - 空闲内存大小
- buff - 用于写缓冲的内存大小
- cache - 用于读缓冲的内存大小
- 交换分区
- si - 每秒交换入内存页
- sw - 每秒交换出内存页
- I/O
- bi - 每秒从块设备中读入的块数
- bo - 每秒向块设备中写入的块数
- 系统
- in - 每秒发出中断数目
- cs - 每秒进行上下文切换时间
- CPU
- us - 用户时间百分比
- sy - 系统时间百分比
- id - 空闲时间百分比
- wa - IO等待时间百分比
- 2.4核心
- 只有 user, nice, system, idle
- us = user+nice
- sy = system
- id = idle
- irq = softirq = wa = 0
- 2.6核心
- 有 user, nice, system, idle, iowait, irq, softirq
- us = user+nice
- sy = system+irq+softirq
- id = idle+iowait
Rule of Thumb
现象 | 说明 | 解决方案 |
运行队列个数 >> CPU个数 | CPU是系统性能瓶颈 |
|
swap-io, swap-out较高 | 内存压力较大 |
|
误解问题 | 用户的描述有时会有岐义 | 从多个角度问同一个问题 |
小技巧
- 更好的ps结果输出
- ps -eo user,pid,ppid,%cpu,%mem,vsz,rss,tty,stat,start,time,wchan,command --forest
- ps -emo user,pid,ppid,%cpu,%mem,vsz,rss,tty,stat,start,time,wchan,command
- top -id 1
- watch
- 仔细记录
- free's free != real free
- try truss
Case Study
- ICBC
- china news (Oracle 9.2.0.1)
- 内存泄漏检查
ToDo
- strace, ltrace 原理
- hdparm 原理
- try kprobes/dprobes
- try LKST
- try kdb
- sysctl
- cook the sar result a little bit more:
- average CPU time (user, sys, iowait)
- peak CPU time (what? when?)
- average run queue size
- peak run queue size
- network send/recv
- I/O read/write
- used memory size
参考资料
2005/06/15 22:29 今天炎热非常，去参加了服务器世界2005会议 (http://serverworld.cnw.com.cn)，算是换换脑筋，给心灵和肉体放个假。
部署了近1400台服务器的盛大网络，被安排在第一个发言。唐骏给64位CPU泼了冷水，认为64位的普及还需要5年的时间，在中国则需要8年时间。SMP体系结构的扩展性问题、64位应用的缺乏，横向扩展的推广，这些都会一定程度上阻碍64位CPU的接受程度。如果对时间的估计带有一些主观因素，那么对于高端IA服务器命运的看法则是有数字为基础的，国内买得最好的是2,4路服务器，8路已经很少见，32路则几乎没有。
他还提出了服务器领域的三个趋势：
- 集中应用 -> 分布式应用
- 分散认证 -> 集中认证
- 中小企业、互联网企业对服务器的需求快速增长
浪潮介绍了Intelligent Flexible Architecture的概念，我可以理解的技术有：
- 可缩放的服务器宽度，以适应不同的机架尺寸。
- 光路诊断，也就是把各个子系统的状态通过指示灯进行显示。
- 智能散热，根据负荷情况调整风扇转速。
- 兼容PCI/PCI-Express插槽。
光路诊断的概念倒是可以推广到软件诊断上，用类似简单的方式把服务器运行状态展示给用户。
工行信息科技部的同志明显是个干实事的，列出了很多细节，包括厂商给出的集中认证软件的报价(1000万)。以前也接触了一些银行客户，这次则有了一些更新的认识：
- 银行一般很少换厂商
- 核心业务往往跑在大型主机上
- 外围辅助应用、后台应用、经营分析系统等则跑在开放系统上
下午HP和IBM的家伙都谈了，IBM列出了用户对IA服务器心存的疑问：
- 稳定性
- 性能
- 可扩展性
- 应用成熟度
- 可管理性
- 稳定性 <= 刀片服务器中的冗余背板技术
- 性能 <= benchmark说明问题
- 可扩展性 <= numa架构提升SMP可扩展性，SATA, SAS的推广，逻辑分区技术，刀片服务器。
- 应用成熟度 <= ？？
- 可管理性 <= tivoli
- 双冗余背板，使系统稳定可靠。
- 每42U机柜可容纳168个CPU，使系统轻松扩展。
- 多种品牌以太网，SAN, 交换机完美整合网络，存储。
- IBM Director，使系统管理简便。
- 校准矢量冷却系统，避免停机困扰。
- 促销，买刀片服务器赠送中心机箱。
HP则更多强调自己产品线的完整，以及Insight Manager, RDP等增值软件。会后一个用户的问题使我对这些管理或软件部署软件的被接受程度有了问号，有人问”HP的增值软件虽然随机免费赠送，但真正得到应用的很少，请问HP如何解决这些问题？”答案是，下周要进行的Road Show，下午马上就收到了HP的"惠普存储售前技术以及新产品培训"邀请，可见此言不虚。
曙光介绍了他的科学计算平民化理念，说白了就是在商业应用中使用负载均衡技术，听了半天，没有收获任何东西，除了他们使用HPC Challenge而不是Linpack做benchmark。刚刚看到新浪登载的全球超级计算机25强: http://tech.sina.com.cn/it/2005-06-15/1125636446.shtml ，其中没有曙光，不知来源是否可靠。
最后是天津网通的一个小伙子作的服务器整合实施报告，收获如下：
- 数据中心的选址和建设很关键，要注意很多细节问题:
- 空调
- 地板承重，一般建筑的承重是300公斤/平米，有的服务器会有成吨重。
- 双电源
- 使用IBM逻辑分区技术进行服务器整合，但分区划分时必须宕机，不是很爽。
4eJ6tgFy 
2010/07/25 04:00
Recommend:led,led lights,led bulb and tube,led lamps manufacturer - LeBao Co., Ltd.7k\@lVFY^yV\2010-7-25 4:00:35
分页： 1/1 
1 
1
