运维大数据分析平台或者运维数据中台厂商推荐?

我们银行要建设运维大数据分析平台或者运维数据中台,主要是实现:都是整合数据、标准化、分析、然后对外提供数据服务。

不知道现在行业有没有有这方面比较好的厂商么?希望可以推荐下,我们正在选厂商。 我们具体需求如下,如果有好的资料、方案也可以分享参考,感谢!

一、数据集成
1、能够将各类基础设施、基础资源、系统软件、业务系统、运维管理类系统等各类信息系统静态数据、动态数据集成在统一的平台上;
2、提供被动接收、主动获取的数据接口,少量开发或者界面配置实现获取外部数据。如标准通用软件接口、文件等;
3、预置数据标准化模板,对常见的软件日志以及文件进行数据提取。

二、数据处理
1、可对集成的数据进行标准化处理,便于存储、分析,提供可读性;
2、可对集成的数据进行压缩、关联、归类、打标签、数据丰富;
3、集成数据可分为实时流数据、历史数据进行相关的数据使用、数据压缩、存储;

三、数据分析
1、运用大数据理念对数据进行综合分析,实现风险预警、故障及时发现、故障准确定位、故障根源分析等;
2、可集成外部的大数据算法或者数据分析模型,进行数据的分析;
3、提供用户自定义的数据分析模型设计功能;
4、可围绕配置管理系统对业务系统和IT支撑环境进行依赖关系建模能力,建依赖关系模型,并支持对依赖关系模型进行依赖、影响范围分析,并将风险提示给用户;支持可视化定制能力,系统能够向用户提供可视化的、交互式的数据分析模型定制工具。
5、提供基于配置管理模型和配置关系基础上的数据影响算法模型,以满足配置变更或发生告警时的定性和定量的影响分析

四、数据服务
1、能提供数据总线供外部系统或者上层应用进行数据的消费;

五、数据展示
1、可提供丰富的可视化组件(如图、表等),利用可视化组件的组合,直观、明了的展示各类数据

六、数据统计
1、具备运维数据常用的基础报表;
2、支持自定义统计报表功能,用户可根据需要自行定义数据范围、查询条件、输出结果(如表格、图形、图形加表格等),针对输出结果的字段用户可利用界面进行配置后计算得出(如通过加、减、乘、除、平均等基本运算);
3、报表支持导出,可导出excel、word等

3回答

EricWangEricWang  产品经理 , 日志易
zhuhaiqiangyinxin圈圈oo等赞同了此回答
您好,根据您的描述和要求想提出几点建议参考,首先您提出的运维大数据都包含哪些?运维基础是日志可以解决绝大数问题。如果是这样日志易完全够用。但实际情况要建设好运维大数据平台的话还得纳入一些网络流量和数据库数据这时候可以考虑引入流量工具。在数据做好整理后可能会...显示全部

您好,根据您的描述和要求想提出几点建议参考,首先您提出的运维大数据都包含哪些?运维基础是日志可以解决绝大数问题。如果是这样日志易完全够用。但实际情况要建设好运维大数据平台的话还得纳入一些网络流量和数据库数据这时候可以考虑引入流量工具。在数据做好整理后可能会做多元输出增加一个数据工厂进行各方对接。这时候所有日志数据或其他数据需要汇总到日志平台方便应用挖掘和分析。这时候需要产品具备高效的处理能力和分析能力方便使用,毕竟数据收的再全展示不了也是白费。数据工厂主要是为各平台输出的重要手段减少不同数据库之间的代码交换或处理提高效率。不论是流量还有前端展示日志易有很多经常合作的我生态伙伴和一体话解决方案。以上方法仅供参考,欢迎来约。
前端收集 中台处理(考虑性能和成熟产品) 后段分析和展现(灵活性必须考虑,不能需要功能就开发代码)

收起
 2019-10-16
  • 感谢您的建议。 1、运维大数据包括:主机、数据库、存储、中间件、应用系统等的日志类数据、监控的性能和告警类的数据。这点我在数据集成需求描述中提到,但是未做详细说明。 2、目前基于主机、数据库、存储、中间件、应用系统等我们都已经上了相对应的监控工具、针对应用系统我们也通过日志和网络旁路流量进行监控实现; 3、这些监控的数据是分散的未能整合进行综合性分析和定位; 4、我们正在建设配置管理系统,也希望大数据分析能基于配置关系来进行分析。 如果您觉得,贵公司产品和我们上面描述的需求匹配度较高,我们可以做深入的交流,再次感谢您的意见
    2019-10-16
  • 您好我是日志易的原厂工程师,您可以叫我洪福 我的电话18519959990 邮箱wang.hongfu@yottabyte.cn 您方便的情况下发我个消息我跟您联系如何?(今天在高铁当打字比较困难,有缘见面详聊)
    2019-10-16
  • 圈圈oo  圈圈oo 回复 EricWang
    好的
    2019-10-17
单无风单无风  需求管理工程师 , 北京博睿宏远数据科技股份有限公司
您好,同事通知我来这看看您的需求,所以才刚注册的账号。老师提出的需求,有很多方面与我司的数据分析平台重叠,希望有机会能当面交流。 针对题主老师提出的需求,我尝试逐一解答。1. 数据集成首先应具备数据采集的能力,题主提到,目前已经具备了基础设施(ITIM,如主机、存储)、应用系...显示全部

您好,同事通知我来这看看您的需求,所以才刚注册的账号。
老师提出的需求,有很多方面与我司的数据分析平台重叠,希望有机会能当面交流。

针对题主老师提出的需求,我尝试逐一解答。
1. 数据集成
首先应具备数据采集的能力,题主提到,目前已经具备了基础设施(ITIM,如主机、存储)、应用系统(NPM旁路监控)、中间件、日志、数据库的监控工具。 所以接下来的问题是将如上数据进行统一的接收集成,博睿的数据分析平台目前具备ITIM、NPM、APM、DEM(用户体验管理)等数据的接收能力,其他没提到如针对系统软件、日志、数据库、监控数据的接收处理,有可能需要对数据格式进行适配。
2. 数据处理 & 数据分析
数据接入平台后,博睿Ants(蚁群)是数据的预处理层,采用ETL实现(流式计算),之后由博睿Zeus( 结构化数据,包含日志数据 )和博睿BRFS(非结构化数据,如图片、语音、快照数据,10亿量级)做数据的存储。
3. 数据分析
数据经由清洗及存储后,可由博睿DPL(Data Process Language)按需求场景对数据进行组合查询,类似标准SQL语句,支持多条件组合过滤和分组统计、多种分析算子函数及关键字后缀模糊匹配检索等功能,为用户提供便捷的统一数据分析接口。
4. 数据消费(数据服务、数据展示、数据统计)
上层展示由博睿DataView实现,支持自定义Dashboard、大屏,拖拽图表,展示形式灵活,所见即所得。

其实题主提出的需求,是很多企业都想做的事情,我们的产品架构也基本与题主的逻辑相同,博睿目前已经实现了1.0版本,部分模块正在某大型股份制银行进行交付。

有些细节没提到的地方,有机会的话可以与您组织线下技术交流,我的联系方式是18510652080.

收起
 2019-10-17
浏览272
  • 好的,我知道博睿是做APM的,你们也有数据分析平台吗?稍后我我们先电话沟通一下。感谢您的回答
    2019-10-17
匿名用户匿名用户
[此回答已删除]
浏览557

提问者

圈圈oo技术经理, 某银行

问题状态

  • 发布时间:2019-10-16
  • 关注会员:4 人
  • 问题浏览:3510
  • 最近回答:2019-10-17
  • 关于TWT  使用指南  社区专家合作  厂商入驻社区  企业招聘  投诉建议  版权与免责声明  联系我们
    © 2019  talkwithtrend — talk with trend,talk with technologist 京ICP备09031017号-30