金融行业在实施数据集市项目时,有哪些技术难点?如何解决?

在软/硬件、开发、运行、维护和管理等各个方面面临哪些困难?如何克服?

参与11

2同行回答

lxcorangelxcorange软件架构设计师某券商
可能主要在三方面:1、技术管理:专门的开发运维团队,和数仓(大仓)间的职责分工,集市技术人员与业务人员间的职责分工明确2、技术架构:集市数据架构设计,从数仓(大仓)数据加载,数据集市运维监控,集市高性能、高可用机制,业务人员灵活定制数据服务与集市日常数据服务、集市数据加载间的资...显示全部

可能主要在三方面:
1、技术管理:专门的开发运维团队,和数仓(大仓)间的职责分工,集市技术人员与业务人员间的职责分工明确
2、技术架构:集市数据架构设计,从数仓(大仓)数据加载,数据集市运维监控,集市高性能、高可用机制,业务人员灵活定制数据服务与集市日常数据服务、集市数据加载间的资源分配,新技术掌控力度等
3、信息安全:开发、运维分离,生产操作各项安全审计,数据库本身权限最小、数据隔离机制等

收起
互联网服务 · 2018-08-07
浏览3322
rein07rein07系统架构师某证券
类比大数据平台,数据ETL是个非常重要且比较有难度的技术点,往往会有人提出数据导的不正常或丢失、数据未正常到达等情况,这个没有较好的解决方法,只能做好监控,尽量保证各个环节正常流转。在运维方面,集群往往面临着查询和存储压力,如何在遇到问题时有效解决或者预警,这也是非常...显示全部

类比大数据平台,数据ETL是个非常重要且比较有难度的技术点,往往会有人提出数据导的不正常或丢失、数据未正常到达等情况,这个没有较好的解决方法,只能做好监控,尽量保证各个环节正常流转。在运维方面,集群往往面临着查询和存储压力,如何在遇到问题时有效解决或者预警,这也是非常有挑战的,可以通过对平台底层的了解,不断对集群进行优化和监控。在开发方面,需要分析人员对业务需求非常了解,才能设计出合理的数据模型,提升数据服务的效率。

收起
证券 · 2018-08-07
浏览3250

提问者

airstuky
项目经理某金融银行
擅长领域: 数据库云计算服务器

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2018-08-06
  • 关注会员:3 人
  • 问题浏览:4535
  • 最近回答:2018-08-07
  • X社区推广