在高并发、低延迟的场景下，企业如何建设敏捷高效的数据集市线上探讨 - twt企业IT交流平台 - talkwithtrend，企业IT技术社区，帮助您融入同行！

在高并发、低延迟的场景下，企业如何建设敏捷高效的数据集市线上探讨

: lxcorange软件架构设计师某券商
关注294
个人主页
Ta的精彩回答
数据集市、数据仓库在方法论上有什么差异，为什么选择不同的技术和平台？
本质上没有区别，如豪华汽车和中端汽车，目的是解决不同场景的问题。数据集市(Data Mart) ...4赞同
数据集市的出现，会使数据仓库消亡吗？
数据集市是企业级数据仓库的一个子集，是为满足特定的部门或者用户的需求，只面向某个特定...2赞同
为什么要做数据集市建设？
数据集市(Data Mart) ，也叫数据市场，是企业级数据仓库的一个子集，是为满足特定的部门或者...4赞同
数据集市在金融行业中发展的态势如何？
数据集市适合行业内拥有海量数据的公司，需对特定领域服务，通过互联网，对公众、监管机构提...3赞同
数据集市项目的直接用户和间接用户是哪些方面？
直接用户是各业务部门、各业务系统，数仓不直接为各业务系统直接提供数据服务，通过数据集...4赞同
数据集市的建设，哪些部门需要提供支持？
建设方为技术部门的数据仓库组或技术平台组，所服务业务部门，技术部门各业务系统组，采购、...4赞同
金融行业在建设数据集市项目时，会面临哪些风险？如何去应对？
风险无处不在，应注意识别并预防，主要以下三方面（1）管理制度、组织架构专门的开发运维...4赞同
数据集市中的数据关系管理？
这需要两方面：1、充分理解业务场景，进行元数据管理，定义各表中各字段的业务含义2、加强数...4赞同
金融行业在实施数据集市项目时，成本组成有哪些？
主要四方面，软件平台厂商支持、团队建设、应用系统开发、硬件维护...2赞同
当前，金融行业中在什么场景下需要建设数据集市？
数据集市(Data Mart) ，也叫数据市场，是企业级数据仓库的一个子集，是为满足特定的部门或者...3赞同
金融行业在规划数据集市项目时，有哪些技术路线可选？
最主要在于分布式数据库选型，如传统关系型如oracle、db2，mpp架构GP、TD、Gbase，新兴分布...4赞同
金融行业在做数据集市项目的方案设计时，需求模型应如何确定？有哪些关键业务参数要考虑？
主要分为业务需求和技术需求两部分。业务需求主要是技术服务部门或系统的业务场景，建模...4赞同
金融行业的数据集市项目，方案整体架构是什么样的？
一般分为数据采集、数据传输、数据处理、数据存储、平台服务等方面，具体每个部分技术方...4赞同
金融行业在实施数据集市项目时，有哪些技术难点？如何解决？
可能主要在三方面：1、技术管理：专门的开发运维团队，和数仓（大仓）间的职责分工，集市技术人员...4赞同
金融行业在数据集市项目中，是否涉及到主机、存储、数据库、系统管理等的选型？如何选型？
一般数据集市和企业数据仓库或大数据平台一起进行选型，主要考虑点包括分布式系统，性价比...2赞同

: rein07系统架构师某证券
关注586
个人主页
Ta的精彩回答
数据集市、数据仓库在方法论上有什么差异，为什么选择不同的技术和平台？
数据仓库和数据集市的关系就像工厂与门店的关系，数据仓库用于存放着非常多的各类数据，而...2赞同
数据集市的出现，会使数据仓库消亡吗？
不会的，两者在概念上并不完全平级，就像工厂和门店的关系一样，两者应该是相辅相成，充分发挥...3赞同
为什么要做数据集市建设？
数据集市是数据仓库的一个重要补充，满足客户对数据的即时性要求；传统数仓往往比较重存储...2赞同
数据集市在金融行业中发展的态势如何？
金融行业积累了非常多的数据，数据质量也很高，随着金融业与技术的有效结合，面向某一领域的...1赞同
数据集市项目的直接用户和间接用户是哪些方面？
直接用户是业务数据分析人员、业务系统负责人员，对数据有强烈的需求和敏锐的嗅觉，能够将...1赞同
数据集市项目建设的支持力量（内部或者外部）是哪些方面？
业务部门应当是最直接的支持力量，因为数据是直接为他们服务的，而他们往往需要通过数据产...4赞同
数据集市的建设，哪些部门需要提供支持？
业务部门、技术部门（主要为数据分析团队、数据仓库团队）应当作为核心部门对此支持，主要为...1赞同
金融行业在建设数据集市项目时，会面临哪些风险？如何去应对？
不光是在数据集市项目上，几乎所有大型项目上，都存在技术、管理、组织、资金等方面的风险...2赞同
数据集市中的数据关系管理？
这个也是数据分析时遇到的共性问题，数据仓库同样由此问题，通常的做法就是建立元数据标准...1赞同
金融行业在实施数据集市项目时，成本组成有哪些？
主要包括硬件服务器、软件平台、平台管理人员、数据分析团队（建模、数据服务化、系统开...1赞同
当前，金融行业中在什么场景下需要建设数据集市？
当用户对大量数据的实时性要求非常迫切，而数据仓库无法满足时，就需要有针对性的对这些数...1赞同
金融行业在做数据集市项目的方案设计时，需求模型应如何确定？有哪些关键业务参数要考虑？
需求模型的确定需要详细了解业务需求，同时具备数据建模思维，将需求转化为数学模型，从而通...1赞同
金融行业的数据集市项目，方案整体架构是什么样的？
整体架构包括采集、存储、处理和访问等层次，就像建立大数据平台一样，这都是需要重点考虑...2赞同
金融行业在实施数据集市项目时，有哪些技术难点？如何解决？
类比大数据平台，数据ETL是个非常重要且比较有难度的技术点，往往会有人提出数据导的不正...2赞同
金融行业在数据集市项目中，是否涉及到主机、存储、数据库、系统管理等的选型？如何选型？
在数据集市项目中，重点关注数据集市的系统技术方案，好的数据存储和计算引擎是数据集市项...4赞同
实施数据集市的项目时，对于项目参与人员，应该如何规划培训学习进行技能储备？
数据集市的项目跟建立大数据平台一样，是个大工程，都面临着数据ETL、存储、计算、数据管...3赞同
数据集市项目的测试验收方案如何制定？
数据集市的建模是终端用户驱动的，终端用户必须参与数据集市的建模过程，因为他们显然是要...4赞同

在本场活动提问

活动明星榜

软件架构设计师某券商

本场活动获赞 52

系统架构师某证券

本场活动获赞 35

项目经理杭州剑齿虎信息技术有限公司

本场活动获赞 3

关于TWT 使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
© 2024talkwithtrend — talk with trend,talk with technologist 京ICP备09031017号-30

X社区推广