背景简介：

金融机构近几年来对信息化的投入与建设不断加强，在长期的业务增长过程中，某金融机构遇到了因无法集中管理日志，频繁造成数据丢失的问题以及因格式不同、日志量庞大导致的检索成本高和效率低下问题。智云盈嘉科技发展有限公司与某金融机构进行深入合作，使用Elasticsearch Stack+Kafka+Zookeeper定制化部署日志系统，以便低成本、高效率地维持系统稳定运行，通过日志系统实时分析日志，实时掌控业务性能瓶颈，大幅度提高故障发现和定位的效率，通过大屏展示，快速清晰地监控业务健康度。

智云盈嘉定制化部署日志解决方案为某金融机构实现集中式数据治理，强化管理能力。

智云盈嘉团队就当前金融行业关注的重点问题与某金融机构进行了深入的沟通并总结了以下客户面临的问题：

１、海量日志数据散落在系统各处，难以做到日志的统一采集整理与集中管理；

２、无法快速定位并排除故障，系统运维效率低；

３、系统出现问题无法及时通知相关人员，无法保障及时性；

４、不能满足监管机构关于数据存储、数据报表等合规审计要求；

５、数据挖掘程度低，无法可视化展现；

为什么选择我们？

智云盈嘉的大数据人才储备丰富，能够根据客户需求定制化选择最适合的大数据产品进行架构，定制化的平台构建可使整个平台性能提升一个档次。金融客户尤其需要日志管理的规范化，定制化构建平台正好迎合客户的需求。本项目对相关的日志数据进行接入、解析，自定义统计分析规则及可视化展示，自定义关键指标监控及告警规则，保证客户良好的体验。

方案结构图：

根据客户需求，结合客户生产环境，我们选择了最高效的组件进行日志系统平台的建设，以下是架构图：

客户收益：

１、智云盈嘉为该金融机构构建的日志中心平台具备高性能、分布式、可扩展的日志处理架构，每秒可分析数百万条日志，每天处理上百PB级的日志量。该金融机构拥有许多专业设备和业务系统每天产生的日志量庞大、格式无规范，无法进行集中管理与分析，Elasticsearch Stack拥有各种同类型的Beats，可根据不同业务与设备使用对应的Beats进行采集数据，将日志进行整理与统一管理。

２、Elasticsearch Stack可以快速定位并排除故障，大大提高运维效率，释放部分IT运维部分任务压力。

３、该金融机构系统肩负资产交易的重任，日均千万交易量，实时监测威胁入侵并及时响应十分重要，定制化的平台可接入客户的告警平台，可用短信的方式通知对应人员让问题及时发现及时解决。

４、此外本次采用的Elasticsearch Stack拥有“冷热架构”的特点，可以将经常查询的热数据放置在性能好的存储设备内，而不经常查询的数据放入性能一般的设备，大大节约了客户的设备成本。采用冷热架构模式，大大增加了数据存储的时间，满足了合规审计等要求。

５、根据客户需求定制化开发系统性能指标图，进行大屏展示，以便运维人员更快定位到故障。

部分效果图：