基于大数据平台的自动化运维及监控技术研究.docxVIP

基于大数据平台的自动化运维及监控技术研究 　　摘要：科学技术日新月异，伴随着信息技术的更新迭代，大数据已成为社会各行业信息技术发展的契机，不断引发热潮。进入XX年，作为对信息爆炸性增长和描述的描述和定义词汇，大数据一词在多个领域被越来越多的提及。相应的，作为一个一体化、综合性应用的平台，其功能涉及到方方面面，包括数据管理、企业资产管理、数据库服务可用性监控等，为企业提高运行效率和服务质量，降低运营成本做出贡献。本文通过对大数据和运维的概念、特征，分析了智能监控技术与大数据运维结合的几个关键因素，提出了一套基于大数据平台的智能监控技术的理论。　　关键词：大数据；自动化；运维关键技术　　中图分类号：TM76 文献标识码：A 文章编号：1007--0102-02　　1 大数据平台面临的挑战　　面对领域大数据，在全生命周期面临着前所未有的挑战，具体到领域来看，大数据的生命周期面临如下难题：采集类问题。如何将大数据精细化，即如何有效地处理大数据；如何从单一角度的大数据中提炼出对应知识和应用数据。大数据面临的储存问题。对于结构明细的数据列，海量数据的更新时间周期更长、效率低下；对于非结构化数据，进行存储、分析需要转化为结构化数据难度较大。　　2 大数据平台涉及的关键技术　　大数据建模、大数据分析处理等几项关键技术在大数据平台的有效支撑性方面有重要建树。　　 大数据平台体系架构　　大数据平台进行系统的研究集成性问题，在有针对性的分析后，对其应用领域中，具有规模庞大、数据关联性密切的特点，大数据的作用越来越多的倾向于将其作为商业决策的重要依据。　　 大数据的建模和存储技术　　大数据建模技术。要解决大数据的统一存储、管理及高效分析处理，需要解决多源、分布和异构数据整合问题。层次、关系网状联通和对象的面向性，是现行阶段下数据建模的主要讨论点。在这些应用了本体大数据建模方法形式中，大数据管理中的困境更容易体现。大数据特征为出发点，统一归纳，总结关系，将数据抽象画处理，最终实现大数据的建模完整，是大数据统一建模的几个步骤。具体有三类信息是大数据分析过后，需要被定义的三类关键信息：大数据的根本信息、功能性问题信息、协调联动机制信息。大数据的特征不同会引起分类聚合的效果，在顶层数据信息的结构化中，结构化和非结构化均有较大差异，对数据的研究一般会按照一定条件如时间、而后进行分析应用。自动化运维模型的接口。在各类分类索引、储存索引和树形索引中，统一接口的综合构成中起到决定性作用。用户通过该接口能针对多源大数据建立管理和关联。自动化运维管理平台功能涉及数据中心日常巡检、企业设备资产管理等，在企业运维的日常管理中，提供了强有力支撑，便于提高运行效率的同时，降低了成本。并且在面向意向对象设计过程中，提出一种多行业信息部门均适应的系统设计目标，并进行阐述。　　 自动化运维功能设计　　企业级深层次信息化运维流程中，自动化运维平台会将以下三类的数据统一监管并给予综合展现。在运用设计思想对运维资源进行对象化、功能化划分后，在设计目标的同时，可以在细分领域中，将平台分为六个功能区。巡检管理。以表单汇总的模式下，所有数据及系统常规检查工作均由中心值班人员完成。运维监控。以图形化的方式实时监控数据库的可用性。设备管理。通过集中化的平台和流程细化物理设备信息，在业务系统管理人员和服务器查询设备的支持下，查询服务器的信息。知识库管理。为了供维修人员方便查阅各类技术运维稳当，此类知识库需要统一的管理和归档。第三方平台接入。依照现有的运维管理工具现状，在账户信息简易流程配置的前提下，自动化运维系统到第三方平台的单点登入嫁接通路可以便捷实现。信管中心。基于企业内部的运维条例、体系、信息化处理及监控问题经充分结合后，精准发布。　　3 数据处理因素　　 数据的匹配安全性　　对于媒体流的精准控制，是数据安全度的重要实施方法，在国家密码局对于密码管理系统的前端进行信息硬件加密，完成对网络高清流媒体的加密；在后端解密时，除了软件解密，还必须通过硬件才能防止单一软件加密方式可能被破解的风险。　　 数据的监控处理　　对于可视化视频的分析处理及定向信息挖掘，是大型监控系统的重要指标之一。　　 监控系统的冗余问题　　传统系统的一大弊端便是对视频数据的储存和处理流程繁杂，过程中能量损耗较高。虚拟化计算机的精细化运营管理，提高可靠性和贴合度的同时，减少了差错率，降低了繁杂度。　　 大数据平台的技术优势　　高清智能视频监控系统在大数据平台的数据支撑下，技术优势凸显。　　 大数据平台的整体扩展性　　存储架构的分散是大数据流程的特点。根据这一特点，可在系统后台灵活处理各项任务。　　 降低投资成本　　硬件匹配性是大数据技术架构的基础，可以根据价格低廉的投资成本，由系