行业卷烟生产经营决策管理系统运维工作详述.DOCVIP

附件： 行业卷烟生产经营决策管理系统运维工作详述 第93期 一、工业企业维护情况 使用决策管理系统的工业企业包括：16家中烟工业公司，中烟实业发展中心，上海烟草集团有限责任公司，总厂28家，分厂80家。 本期共受理工业企业突发事件202个。具体见下表： 表一、工业企业运行情况表 事件分类 事件数（个） 占事件总量（%） 已解决（个） 打 码 14 6.9 14 扫 码 12 5.9 12 数据采集 44 21.8 44 管 理 机 105 52.0 104 接 口 7 3.5 7 数据统计 4 2.0 4 基础代码 5 2.5 5 国家局端 11 5.4 11 其 他 0 0.0 0 总 计 202 100.0 201 引发事件的主要原因统计分析如下图所示： 图.事件按故障根源统计所占比例分布图（工业） 注：目前尚有1个事件未确定故障根源。 本期主动监控发现各类事件96个，占所有突发事件的47.5%。监控类事件详细分类如下表所示： 类型 事件总计（个） 故障原因 数量（个） 管理机端 65 文件系统剩余空间不足 40 表空间剩余不足 2 硬件故障 11 MQ传输通道异常 7 应用异常 0 服务器时间异常 3 停机（断电或人为关机） 0 其他 2 数采上报 31 系统环境 22 人为原因 8 接口因素 1 本期工业方面的重要事件： 1.3月10、11日，绵阳卷烟厂连续2次发生服务器宕机现象，导致本地决策管理系统无法登录。运维人员通过远程协助方式直连到其服务器端排查故障原因，并快速修复系统以确保服务得到恢复；经详细排查，初步确定故障原因是客户机房环境温度较高导致服务器宕机，并无硬件故障，已建议客户调整机房通风状况，并继续监测了一周服务器运行状况，目前服务器运行稳定。 2.3月11日，贵阳卷烟厂反映服务器断电后无法正常启动。运维人员远程指导客户启动了服务器，并经详细排查后发现DB2服务器的hosts文件内容被人为修改，原IP信息丢失，双机IP无法正常连接导致无法启动；运维人员修复hosts文件后，双机正常启动，服务恢复正常。 3.3月14日，甘肃烟草工业有限责任公司反映排产页面异常，无法正常排产。运维人员经详细排查，发现客户3月12日升级了数据库及应用程序，一旦启动服务数据库连接即无法释放，很快达到最大连接数，CPU使用率达100%，造成系统页面无法登录。运维人员尝试多种办法无法恢复程序，为确保正常生产为企业开启了网上排产功能，并紧急联系了程序升级方，回退程序后服务于当晚恢复正常，目前系统已可正常登录及排产。 4.3月21日，上海烟草集团有限责任公司反映服务器的文件系统使用率达到100%，无法正常排产。运维人员经详细排查，发现客户的WAS服务器的/usr、DB2服务器的/home两个文件系统都达到了100%，原因是WAS和 DB2软件当天产生了大量的日志文件，日志文件分别达到了3G和5G，致使文件系统爆满。运维人员为其清理了日志，并重启DB2服务释放了Agent，系统恢复正常；经对软件进行监测，目前软件运行稳定。 5.3月31日晚7点30分，四川与重庆烟草工业有限责任公司反映码段申领后长时间未到达本地。运维人员经详细排查，发现四川烟草工业有限责任公司码段申领请求提交后，国家局后台数据库一直未进行LOAD操作，而程序控制只能同时存在一家企业申领，其申领未成功导致进程不释放，进而影响重庆烟草工业有限责任公司的申领。运维人员及时终止了四川烟草工业有限责任公司的申领操作，重新进行申领后成功；随后重庆烟草工业有限责任公司也申领成功，至晚9点30分，两家企业的码段都成功下发到本地。 二、商业企业维护情况 使用决策管理系统的商业企业包括：33家省级局（包括深圳、大连两个计划单列市），346家地市公司。 本期共受理商业企业事件349个。具体见下表： 表二、商业企业运行情况表 事件分类 事件数（个） 占事件总量（%） 已解决（个） 扫 码 20 5.7 20 工商数采 98 28.1 98 管 理 机 137 39.3 137 接 口 69 19.8 69 数据统计 4 1.1 4 基础代码 21 6.0 21 国家局端 0 0.0 0 其 他 0 0.0 0 总 计 349 100.0　 349 引发事件的主要原因统计分析如下： 图.事件按故障根源统计所占比例分布图（商业） 本期主动监控发现各类事件145个，占所有突发事件的51.9%。监控类事件详细分类如下表所示： 类型 事件总计（个） 故障原因 数量（个） 管理机端 97 文件系统剩余空间不足 41 表空间剩余