周晓凌:大数据时代的智能运维实践

2017 年 11 月 13 日 DataCanvas大数据云平台

日前,北京九章云极科技有限公司应邀参加了2017银行业智能运维与IT风控专题交流会。广东(广州) 金融监管机构、中国银行、中国工商银行等40多位银行代表出席了会议。九章云极售前总经理周晓凌就“应对金融IT运维挑战,提升系统安全保障能力”的会议主题,发表了题为《大数据时代的智能运维实践》的精彩演讲,从技术角度对银行业数据中心的智能运维进行了深度剖析。

九章云极售前总经理周晓凌发表演讲

周晓凌指出,大数据的运维目标经历了流程化运维、工具化运维、自动化运维到智能化运维的历程。大数据运维发展到智能运维阶段,由于微服务、容器、云计算等技术的兴起以及互联网业务的发展,运维的目标从几百个大系统变成上万个微服务。运维人员被量大且更新迅速的指标淹没,在这种情况下,发现问题,分析原因,解决问题都变的十分困难。九章云极针对这一状况,研发出了以Hadoop为代表的大数据工程技术,在数据分析、数据挖掘、机器学习以及深度学习方面极大的提升了大数据的算力,用数据加算法来分析问题、发现故障、寻找原因、解决问题。简而言之,就是智能运维风险的变化与大数据AI技术的兴起,共同催生了智能运维AIOps。

周晓凌认为,人工智能来源于算法,算法来源于数据,智能运维平台的架构就是在数据采集之后进行数据建模 、数据计算(实时计算、索引计算、维度计算)、数据存储,同时,及时发现数据异动,监控告警。在这其中,最大的挑战就是日志量,另一个挑战,就是如何利用好的算法解决运营上的问题。智能运维平台的架构优势就在于,每一个数据发生变更时,随时抽取数据去做基于机器学习的日志分析,实时响应问题,同时,实现可视化统计与监控,真正做到所见即所得。

会议现场

在问答阶段,针对与会嘉宾提出的九章云极的数据结构平台如何实现智能运维及风险控制的问题,周晓凌回答,九章云极根据银行的特殊性、信息的庞大性、要求响应的即时性以及数据安全的重要性,建立全数据中心运维平台。该平台通过统一的日志中心,实现全数据中心信息系统日志的统一标准、统一收集、统一处理、统一保存。在TB级日志文件产生的同时即时分析,发掘系统运行状况及业务运行状况,改进系统和优化业务流程。在此基础上,对异常故障数据进行挖掘,建立服务依赖链,实现服务故障链分析、故障根源分析。从而,助力银行数据平台运维稳定高效,为风险防控赋能增效,真正实现极速、智能、安全。

北京九章云极科技有限公司自成立以来,一直致力于打造最领先的数据分析平台服务,助力企业客户构建业务驱动的数据应用,完成数据化转型提升。公司的核心产品DataCanvas已经在金融、电信和互联网行业广泛应用,并获得了用户的一致好评。DataCanvas包括DataCanvas DEP数据工程平台、DataCanvas APS数据科学平台、DataCanvas RT流数据实时处理平台和DataCanvas MML运维监控与分析平台,覆盖了数据处理、数据分析、数据应用的所有阶段,旨在为用户提供完整数据服务,帮助企业将原有数据存储架构平滑迁移到大数据分布式计算架构之上,并快速实现深入的数据分析和应用。

登录查看更多
1

相关内容

运维,这里指互联网运维,通常属于技术部门,与研发、测试、系统管理同为互联网产品技术支撑的4大部门,这个划分在国内和国外以及大小公司间都会多少有一些不同。
专知会员服务
107+阅读 · 2020年6月12日
商业数据分析,39页ppt
专知会员服务
157+阅读 · 2020年6月2日
德勤:2020技术趋势报告,120页pdf
专知会员服务
187+阅读 · 2020年3月31日
专知会员服务
121+阅读 · 2020年3月26日
《人工智能2020:落地挑战与应对 》56页pdf
专知会员服务
194+阅读 · 2020年3月8日
【大数据白皮书 2019】中国信息通信研究院
专知会员服务
133+阅读 · 2019年12月12日
2019年人工智能行业现状与发展趋势报告,52页ppt
专知会员服务
115+阅读 · 2019年10月10日
大数据安全技术浅析
计算机与网络安全
14+阅读 · 2019年4月24日
业务中台:如何在互联时代,快速响应用户需求?
互联网er的早读课
24+阅读 · 2018年12月26日
【大数据】海量数据分析能力形成和大数据关键技术
产业智能官
17+阅读 · 2018年10月29日
腾讯互娱刘伟 | 知识图谱在运维中的应用
开放知识图谱
20+阅读 · 2018年10月10日
人工智能大数据平台中Golang的应用实践
MomentaAI
5+阅读 · 2018年9月27日
智能时代如何构建金融反欺诈体系?
数据猿
12+阅读 · 2018年3月26日
一篇文章读懂阿里企业级数据库最佳实践
阿里巴巴数据库技术
5+阅读 · 2017年12月20日
【大数据】如何用大数据构建精准用户画像?
产业智能官
12+阅读 · 2017年9月21日
A General and Adaptive Robust Loss Function
Arxiv
7+阅读 · 2018年11月5日
VIP会员
相关VIP内容
专知会员服务
107+阅读 · 2020年6月12日
商业数据分析,39页ppt
专知会员服务
157+阅读 · 2020年6月2日
德勤:2020技术趋势报告,120页pdf
专知会员服务
187+阅读 · 2020年3月31日
专知会员服务
121+阅读 · 2020年3月26日
《人工智能2020:落地挑战与应对 》56页pdf
专知会员服务
194+阅读 · 2020年3月8日
【大数据白皮书 2019】中国信息通信研究院
专知会员服务
133+阅读 · 2019年12月12日
2019年人工智能行业现状与发展趋势报告,52页ppt
专知会员服务
115+阅读 · 2019年10月10日
相关资讯
大数据安全技术浅析
计算机与网络安全
14+阅读 · 2019年4月24日
业务中台:如何在互联时代,快速响应用户需求?
互联网er的早读课
24+阅读 · 2018年12月26日
【大数据】海量数据分析能力形成和大数据关键技术
产业智能官
17+阅读 · 2018年10月29日
腾讯互娱刘伟 | 知识图谱在运维中的应用
开放知识图谱
20+阅读 · 2018年10月10日
人工智能大数据平台中Golang的应用实践
MomentaAI
5+阅读 · 2018年9月27日
智能时代如何构建金融反欺诈体系?
数据猿
12+阅读 · 2018年3月26日
一篇文章读懂阿里企业级数据库最佳实践
阿里巴巴数据库技术
5+阅读 · 2017年12月20日
【大数据】如何用大数据构建精准用户画像?
产业智能官
12+阅读 · 2017年9月21日
Top
微信扫码咨询专知VIP会员