OMS中间件系统运行报告
起始日期：2015年7月1日-终止日期：2015/7月30日
前言
1,本报告主机就与oms中间件相关的各项系统的各项工作，包括应用系统，操作系统，版本发布及变更，附件等进行记录，分析汇总和报告，以保障oms的安全、稳定、高效运行，支持业务、管理及各项工作开展。
2，本报告为月度报告，报告周期为公历每月第一日到每月末的最后一天。
一、中间件部分
（一）OMS中间件系统运行
1、主要业务中间件
序号 |
简称 |
中文名称 |
运行态势 |
1 |
Was |
应用服务中间件 |
运行良好 |
2 |
Redis |
Redis缓存服务器 |
运行良好 |
2、其他相关系统
序号 |
简称 |
中文名称 |
运行态势 |
1 |
无 |
无 |
无 |
|
|
|
|
3、系统间接口
序号 |
简称 |
中文名称 |
运行态势 |
1 |
EBS |
企业服务总线 |
运行良好 |
2 |
DB2 |
DB2数据库 |
运行良好 |
4.运行情况总体描述（分系统）
1，主机运行整体运行良好。
2，监控系统整体运行良好。
3，与数据库之间运行良好。
（二）应用系统升及发布
1、主要业务系统升级及发布
序号 |
系统简称 |
升级及发布描述 |
获取日期 |
升级日期 |
备注（是否反馈） |
|
|
|
|
|
|
|
|
|
|
|
|
2、升级及发布情况说明
l 无升级计划，日前处于稳定运行中。
l 发布计划（？？？）
（三）应用系统运行日志检查
1、系统运行日志检查
序号 |
系统简称 |
日志运行 |
上线、暂停、变更情况 |
备注（是否反馈） |
|
|
|
|
|
|
|
|
|
|
2、系统运行日志检查
l 与数据库及ebus运行日志显示系统、设备、应用、接口运行良好
l 系统环境日志显示系统软硬件运行良好
l 系统发布（）截止目前为止运行良好
（四）应用系统维护
1、维护单情况统计
序号 |
维护单目的 |
问题提出数 |
问题解决数 |
问题上报数 |
备注（是否反馈） |
|
|
|
|
|
|
|
|
|
|
|
|
2、主要大类问题原因分析及解决建议
l 1
l 2
l 3
五，性能状况分析
服务器运行情况
1，磁盘空间
2，内存空间
cat/etc/cron.d/sysstat
查看每分钟的具体信息
-rw-r--r-- 1 root root 454128 Mar 1223:50 sa12
-rw-r--r-- 1 root root 454128 Mar 1323:50 sa13
-rw-r--r-- 1 root root 454128 Mar 1423:50 sa14
-rw-r--r-- 1 root root 454128 Mar 1523:50 sa15
-rw-r--r-- 1 root root 454128 Mar 1623:50 sa16
-rw-r--r-- 1 root root 454128 Mar 1723:50 sa17
-rw-r--r-- 1 root root 454128 Mar 1823:50 sa18
-rw-r--r-- 1 root root 454128 Mar 1923:50 sa19
-rw-r--r-- 1 root root 34912Mar 20 01:20 sa20
-rw-r--r-- 1 root root 461828 Mar 1223:53 sar12
-rw-r--r-- 1 root root 461828 Mar 1323:53 sar13
-rw-r--r-- 1 root root 461828 Mar 1423:53 sar14
-rw-r--r-- 1 root root 461828 Mar 1523:53 sar15
-rw-r--r-- 1 root root 461828 Mar 1623:53 sar16
-rw-r--r-- 1 root root 461828 Mar 1723:53 sar17
-rw-r--r-- 1 root root 461828 Mar 1823:53 sar18
-rw-r--r-- 1 root root 461828 Mar 1923:53 sar19
其中，sa是每十分钟的性能数据
而sar是每一天的性能数据
sar的cpu的
sar的
查看cpu的使用情况：
/usr/bin/sar -q -f sa12
06:20:01 PM runq-sz plist-sz ldavg-1 ldavg-5 ldavg-15
06:30:01 PM 0 230 0.02 0.04 0.00
06:40:01 PM 0 229 0.10 0.17 0.07
06:50:01 PM 0 228 0.08 0.08 0.07
07:00:01 PM 0 226 0.10 0.06 0.04
07:10:01 PM 0 225 0.08 0.32 0.20
07:20:01 PM 0 226 0.00 0.05 0.09
07:30:01 PM 0 227 0.01 0.05 0.07
07:40:02 PM 0 226 0.16 0.16 0.10
07:50:01 PM 0 226 0.03 0.05 0.06
08:00:01 PM 0 228 0.00 0.00 0.01
08:10:01 PM 0 226 0.11 0.59 0.47
08:20:01 PM 0 226 0.06 0.12 0.26
08:30:01 PM 0 226 0.01 0.04 0.14
08:40:01 PM 0 226 0.12 0.15 0.12
08:50:01 PM 0 226 0.08 0.07 0.08
09:00:01 PM 0 227 0.03 0.05 0.06
09:10:01 PM 0 227 0.01 0.02 0.02
09:20:01 PM 0 226 0.08 0.04 0.01
09:30:01 PM 0 226 0.00 0.02 0.00
09:40:01 PM 0 227 0.22 0.21 0.08
09:50:01 PM 0 225 0.11 0.11 0.08
10:00:01 PM 0 226 0.06 0.04 0.06
runq-sz ：runqueue length (number of tasks waiting for run time )等待执行的任务队列长度。越长阻塞越严重
plist-sz : Nubmer of taskof in the task list ,队列中的任务总数，如果队列越多，则负载越高
ldavg-1：systemload average for last minute.the load average is calculated as theaverage
number of runable orrunning tasks (R state ).and the number of tasks in uninterruptible sleep (Dstate)
over the specifiedinterval
1分钟，5分钟，15分钟的内系统负载描述
值是通过执行中的任务和等待执行的任务的个数的平均得到 的
如果值等于cpu的个数的时候，则相应的负载就很高了
cpu占用百分比：
sar -p -f sa08
10:00:01 PM CPU %user %nice %system %iowait %steal %idle
10:10:01 PM all 0.90 0.00 0.16 0.96 0.00 97.98
10:20:01 PM all 0.22 0.00 0.08 0.20 0.00 99.49
10:30:01 PM all 0.42 0.01 0.19 0.30 0.00 99.08
10:40:01 PM all 1.94 0.00 1.04 0.21 0.00 96.81
10:50:01 PM all 4.89 0.00 2.65 0.27 0.00 92.19
11:00:01 PM all 0.34 0.00 0.15 0.22 0.00 99.29
11:10:01 PM all 1.82 0.00 0.97 0.25 0.00 96.95
11:20:01 PM all 4.81 0.00 2.69 0.21 0.00 92.29
11:30:01 PM all 0.39 0.01 0.17 0.21 0.00 99.23
11:40:01 PM all 0.30 0.00 0.14 0.19 0.00 99.37
11:50:01 PM all 0.29 0.00 0.13 0.18 0.00 99.40
Average: all 1.09 0.00 0.48 0.32 0.00 98.12
PRI:进程优先权，代表这个进程可被执行的优先级，其值越小，则优先级越高，越早被执行
NI:进程Nice值，进程可被执行优先级的修正值PRI(new) =PRI(old)+nice
%nice :改变优先级的进程cpu占用率
%steal:管理程序 等待cpu ,如果这个值越高，则cpu的繁重承度越高
内存监控：
sar -r -f sa14
5:20:01 PM kbmemfree kbmemused %memused kbbuffers kbcached kbswpfree kbswpused %swpused kbswpcad
05:30:01 PM 5150396 3158920 38.02 43272 2775444 6738324 3550820 34.51 272
05:40:01 PM 5136604 3172712 38.18 44528 2786664 6738324 3550820 34.51 272
05:50:01 PM 5144008 3165308 38.09 45772 2789828 6738324 3550820 34.51 272
06:00:01 PM 5120756 3188560 38.37 47000 2797632 6738324 3550820 34.51 272
06:10:01 PM 5100240 3209076 38.62 48288 2823000 6738328 3550816 34.51 272
06:20:01 PM 5103304 3206012 38.58 49468 2824792 6738328 3550816 34.51 272
06:30:01 PM 5079028 3230288 38.88 50760 2838960 6738328 3550816 34.51 272
06:40:01 PM 5068076 3241240 39.01 52004 2849572 6738328 3550816 34.51 272
06:50:01 PM 5029756 3279560 39.47 53292 2895540 6738328 3550816 34.51 272
07:00:01 PM 5035612 3273704 39.40 54528 2896480 6738328 3550816 34.51 272
07:10:01 PM 4982248 3327068 40.04 55904 2951032 6738332 3550812 34.51 268
07:20:01 PM 4978536 3330780 40.08 57080 2951184 6738332 3550812 34.51 268
07:30:01 PM 4969684 3339632 40.19 58344 2951892 6738332 3550812 34.51 268
07:40:02 PM 4969944 3339372 40.19 59556 2952476 6738332 3550812 34.51 268
07:50:01 PM 4968340 3340976 40.21 60744 2952696 6738332 3550812 34.51 268
08:00:01 PM 4969648 3339668 40.19 61936 2952932 6738332 3550812 34.51 268
08:10:01 PM 630528 7678788 92.41 12176 7325364 6736652 3552492 34.53 76
08:20:01 PM 555060 7754256 93.32 13640 7400172 6736652 3552492 34.53 76
08:30:01 PM 529368 7779948 93.63 15580 7423888 6736652 3552492 34.53 76
08:40:01 PM 787536 7521780 90.52 16032 7157644 6737240 3551904 34.52 100
08:50:01 PM 777580 7531736 90.64 17252 7165808 6737240 3551904 34.52 100
09:00:01 PM 777704 7531612 90.64 18496 7169664 6737240 3551904 34.52 100
09:10:01 PM 740480 7568836 91.09 19956 7206192 6737240 3551904 34.52 100
kbmemfree 内存使用的空闲值
kbmemused 内存的使用情况
%memused ：内存的使用率
kbbuffers ：对磁盘块的缓存 比文件更底层
kbcached ：对文件的缓存
kbswpfree ：
kbswpused ：
%swpused：
kbswpcad：
buffer/cached 是为了提高文件读取性能的磁盘缓存
sar -B -f sa14
05:20:01 PM pgpgin/s pgpgout/s fault/s majflt/s
05:30:01 PM 3.43 52.88 701.48 0.00
05:40:01 PM 11.06 34.22 276.89 0.00
05:50:01 PM 3.90 35.13 222.18 0.00
06:00:01 PM 2.65 33.76 268.97 0.00
06:10:01 PM 58.69 197.54 906.76 0.01
06:20:01 PM 0.35 45.76 236.23 0.00
06:30:01 PM 2.38 58.40 430.53 0.00
06:40:01 PM 0.27 33.41 299.91 0.00
06:50:01 PM 1.22 45.97 533.63 0.00
07:00:01 PM 0.49 31.04 222.84 0.00
07:10:01 PM 0.85 51.12 494.37 0.00
07:20:01 PM 0.86 111.17 372.26 0.00
第一部分： pgpgin/spgpgout/s 内存页的切换换进，换出
第二部分：fault/s 每秒钟系统产生的缺页数majflt/s，这个我们
看一下swap的交换的使用
sar -W -f sa14
06:20:01 PM pswpin/s pswpout/s
06:30:01 PM 0.00 0.00
06:40:01 PM 0.00 0.00
06:50:01 PM 0.00 0.00
07:00:01 PM 0.00 0.00
07:10:01 PM 0.00 0.00
跟Swap之间的交换很小
看一下io
sar -b -f sa08
06:20:01 PM tps rtps wtps bread/s bwrtn/s
06:30:01 PM 24.87 4.29 20.58 137.11 269.97
06:40:01 PM 15.38 1.96 13.41 103.43 184.42
06:50:01 PM 36.64 0.74 35.90 20.40 674.87
07:00:01 PM 15.56 0.58 14.98 9.28 201.11
07:10:01 PM 313.60 27.99 285.61 471.21 4111.74
07:20:01 PM 13.51 0.10 13.41 1.44 184.77
07:30:01 PM 17.09 0.26 16.83 4.00 240.63
07:40:02 PM 13.08 0.28 12.80 4.44 174.43
07:50:01 PM 13.09 0.26 12.84 3.33 174.88
08:00:01 PM 12.46 0.14 12.33 2.25 168.55
08:10:01 PM 1493.94 471.01 1022.93 101762.58 23291.99
tps每秒物理设备的i/o请求次数
rtps:每秒钟从物理设备读入的请求次数
wtps:每秒钟向物理设备写入的请求次数
bread/s每秒钟从物理设备读入的数据量,单位为块/s
bwrtn/s每秒钟向物理设备写入的数据量,单位为块/s
/usr/bin/sar -d -f sa12
rd_sec/s
综上所述:sar -r，是对内存进行统计
sar -n DEV可以用来查看网络统计
WAS主机运行状况
1，
REDIS主机运行状况