【案例】某机场公安视频监控系统故障分析报告

Cerrie · 发表于 2015-7-10 15:53:08

一、
故障现象描述
用户反映通过客户端程序来查看各监控视频会出现不流畅，也就是画面会断断续续的卡住。
二、
网络拓扑架构

上图为目前用户的网络拓扑架构，查看视频监控的业务流程，主要是通过用户客户端程序访问转发服务器，然后转发服务器再去调DVR的视频监控，再后转发服务器将调到视频监控数据返回到用户客户端程序。
科来抓包点：由于整个通讯过程的流量都必需经常CISCO 4509交换机，因此科来抓包点数据都来自CISCO 4509所有端口的镜像数据。

一、
故障现象分析
1、分析客户端IP：10.40.112.250与分发服务器IP：10.40.112.250通信过程。

如下图：

备注：“三次握手时间”：相当于服务器和客户端ping时间，可用于衡量服务器到客户端的网络时延。
1）网络延时分析：网络时延1毫秒，网络质量优异。
2）服务器响应性能：收到请求后31毫秒才给予响应，性能一般。
3）数据传输性能：如下为客户端与分发服务器会话交易过程，正常服务器传输数据的延时只有0.000001，如图1，但是在数据载荷长度小于1460字节的情况下，就会出现很多数据传输延时很大的情况，

超过100多毫秒，如图 2，图3。视频流量对网络延时要求非常高，断断续续的出现这种延时较大情况，那很有可能就是造成视频经常卡住的现象。由于分发服务器IP：10.40.112.250还要与DVR：172.16.75.84通讯，为了进一步确认是不是分发服务器造成的视频卡的原因，接下来会分析分发服务器IP：10.40.112.250还要与DVR：172.16.75.84通讯。

2、分析分发服务器IP：10.40.112.142与DVR：172.16.75.84通讯过程。

如下图：

备注：有大量重复的数据包是由于镜像数据做重复造成的，对后续数据包分析不会造成影响。
1）网络延时分析：网络时延1毫秒，网络质量优异。
2）服务器响应性能：收到请求后非常快才就给予响应，性能优异。

3）数据传输性能：如下为分发服务器与DVR会话交易过程，正常服务器传输数据的延时只有0.000001，如图 4，正常DVR传输数据的延时只有0.000001左右，但是在数据载荷长度小于1460字节的情况下，也会出现很多数据传输延时较大的情况，但延时也只有不到40毫秒，如图 4 ，图5。

结论：通过两个会话的对比，分发服务器IP：10.40.112.14性能问题是最有可能造成视频监控出现断断续续卡住的现象。

建议：优化或更换分发服务器。

【案例】某机场公安视频监控系统 故障分析报告

本帖子中包含更多资源

【案例】某机场公安视频监控系统故障分析报告