某单位X系统报表打开故障分析报告

某单位系统报表打开故障分析报告目录X故障现象1业务访问逻辑及分析部署2业务访问路径

2.1分析设备部署

2.2分析过程3省局访问情况分析

3.1数据库上联采集点分析情况

3.

1.1核心交换机采集点分析情况

3.

1.2徐州访问情况分析

3.2表格正常打开情况分析我们分析了机房交换机、数据库321IDC上联交换机监控点的情况，均能看到数据库在序列号为的后回复的数据，确认问题出现在徐州防火墙“1897986096”ACK询问局点防火墙长连接设置的超时时间为分钟，也就是B301800秒，而数据库最后一次响应时间为秒，超过了局点国税防2453B火墙设置的秒，导致防火墙等待秒后还未收到会话的18001800任何数据，主动断开连接，导致数据库后续数据未能成功发送反观省局的防火墙长连接时间为不限时，导致省局能够打开表格,而局点经常无法打开表格的情况B分析结果及建议4分析小结

4.1通过数据包级的深入分析，可以确定表格打开缓慢原因是数据库对查询语句的响应时间非常长省局能够打开表格，局点国税经常无法打开表格的原因是局点B B防火墙长连接设置时间为秒，数据库对查询语句的响应1800时间经常超过秒，导致局点经常无法打开表格的现象1800B分析建议

4.2该问题根本原因在于数据库查询缓慢，建议数据库管理员优化数

1.据库查询效率，尤其需要关注如下语句1SUBSTRHY_DM,1,3….SUMBQYXSSSR2SUBSTRHY_DM,1,3SUMQMLDSE_GDZC3ZSPM_DM….SUMBQYXSSSR•••ORA-01403:no datafound4SUBSTRHY_DM,1,2….SUMBQYXSSSR5HY_DM…SUMBQYXSSSR6HY_DM---SUMQMLDSE_GDZC更改防火墙长连接配置，设置成更长时间或永久已通知局点

2.B B国税更改配置表格打开未成功情况分析分析结果及建议4分析小结

4.1分析建议

4.2故障现象1国税系统基于架构设计，通过网页上“生成报表”功能读取X B/S用户希望打开的报表目前的故障现象归纳为以下几点系统的特定报表打开速度非常缓慢，有些长达半天时间；1X省局和局点打开表格速度虽然缓慢，但最终能够打开表格；2A局点经常出现打开表格过程中断的情况3B业务访问逻辑及分析部署2业务访问路径

2.1（）省局客户端f省局内网防火墙-机房防火墙-核心交1IDC IDC换机一数据库防火墙一数据库上联交换机-数据库服务器

（2）局点客户端局点防火墙一省局内网防火墙机房防B-B fDC火墙，核心交换机一数据库防火墙一数据库上联交换机-数据库DC服务器分析设备部署

2.2采用多点小时实时抓包分析，通过对比多个采集点的流量，找7*24出引起故障的根本原因，定位具体的故障点科来网络回溯分析系统的部署拓扑如下图所示针对业务访问故障情况，分别设置了如下监控点，对业务拓扑进X行了全面覆盖式监控省局内网I机房核心交换机HDC数据库上联交换机I局点内网I B分析过程3省局客户端为局点为IP

77.

16.

28.228,B IP省局及局点访问数据库均存在数据库响应非常缓慢的情况，数据B库对每个数据库查询请求响应时间达到几分钟至几十分钟，而一次表格查询需要发出多个数据库查询请求，导致每次表格打开需要等待较长时间省局访问情况分析

3.1数据库上联采集点分析情况

3.

1.1访问一共产生了的数据，但却花

77.

16.

28.

22877.

88.

16.

333.31MB费了小时分钟如下图所示147通过回溯分析系统的流重组技术，具体察看本次会话的统TCP TCP计信息）三次握手时间约为毫秒，客户端与服务器之间的网络传输质15量良好；）客户端传输数据时间约为秒；25）服务器传输数据时间约为秒；32）服务器响应时间约为小时分，大大超出正常响应范围4147通过数据包的筛选，发现多个耗时几百秒甚至是上千秒响应的通讯响应时间秒616响应时间秒474响应时间秒478响应时间秒352响应时间秒1820响应时间秒1694响应时间秒447响应时间秒306具体造成延迟的查询语句如下表所示核心交换机采集点分析情况访问一共产生了的数据,但却花

77.

16.

28.

22877.

88.

16.

333.29MB费了小时分钟如下图所示147通过回溯分析系统的流重组技术，具体察看本次会话的统TCP TCP计信息经过分析，与服务器上联采集点观察到的情况一模一样同样,通过数据包筛选也存在耗时几百秒甚至是上千秒服务器才作出响应的情况，这里就不再截图了局点访问情况分析

3.2B对局点多次打开表格的流量监控情况来看，完整的表格打开过程B中，数据库响应时间均在秒以内的表格虽然打开非常缓慢，2000但最终能够打开；表格打开过程中出现数据库响应超过秒的2000表格无法正常打开表格正常打开情况分析

3.

2.1局点在月号下午分打开了一个表格，在B IP616164618分成功打开表格，中间出现多次数据库响应时间达到秒以47500上的情况，但响应时间均未超过秒2000月号下午分打开表格，发出数据库查询请求:6161646分数据库响应出现秒的延时1651824分数据库响应出现秒的延时1705669经过多次延时表格最终在分成功打开1847表格打开未成功情况分析

3.

2.2局点内网监控情况

3.221B在月号上午分发起打开表格的请求，最617817终表格打开异常中断局点内网监控情况截图如下B月号上午分发起打开表格的请求:617817分发出一个数据库查询请求，收到数据库的确认包后没有再929收到数据库的响应数据，数据库回复的序列号为ACK“1897986096”局点反应该表格未成功打开B数据库上联交换机监控情况

3.222在数据库上联交换机监控链路找到在月号上午分发617817起的会话，并找到局点内网监控点最后收到服务器的序列B ACK号，发现数据库在经过秒后给回复了查询数据，“1897986096”2453响应时间为秒2453数据库响应数据在经过多次重传后，再无后续报文对比局点内网监控点在序列号为的后未收到B“1897986096”ACK任何数据库响应的数据，确认局点至数据库中间链路问题导致B徐州未收到数据库回复的数据。