数据治理 - 主题 - twt企业IT交流平台

热点

医院非结构化数据存储·2018-09-25

448 会员关注

一是非结构化文档及自然语言的结构化处理。包括中文分词、标准化、XML解析、本体构建、语义标注等。例如，电子病历的“结构化”是从医学信息学的角度将以自然语言方式录入的医疗文书按照医学术语的要求进行结构化分析，并将这些语义结构最终以关系型结构的方式保存到数据库...

大数据·2018-08-20

garyond · 某科技公司　擅长领域：大数据, 数据治理, 数据仓库

3 会员关注

随着大数据应用的爆发性增长，大数据应用已经衍生出了自己独特的架构，而且也直接推动了数据存储、网络及计算技术的快速发展。毕竟处理大数据这种特殊的需求是一个新的挑战。硬件的发展最终还是由软件需求推动的，就这个例子来说，我们很明显的看到大数据分析应用需求正在影响着...(more)

赞同4

大数据·2018-08-14

在高并发、低延迟的场景下，企业如何建设敏捷高效的数据集市线上探讨精华汇总

rein07 · 某证券　擅长领域：人工智能, 大数据, 机器学习

583 会员关注

随着大数据技术的发展，数据量急剧增长，数据的分析挖掘工作也变得越来越重要。在这背后，数据仓库的建设尤为重要，通过数仓，可以为数据分析人员提供全面的数据和计算能力。数据仓库包括原子级别的数据和轻度汇总的数据，是面向主题的、集成的、不可更新的(稳定性)、随时间不断变化...(more)

赞同4

专栏：活动总结

保险区块链·2018-07-18

数据量如何估算？

steelshark · 中智智人（贵州）信息技术有限公司北京分公司　擅长领域：服务器, 分布式系统, 区块链

4 会员关注

数据存储量确实会大幅增加，可以靠实际测算得到存储量的消耗，不过，硬件存储成本在整个开支中占比不大。积分系统如果很小，不必自备节点，可以选择依附和使用几个大节点。

赞同4

回答1

关注2

电信运营商Kubernetes·2018-07-11

elasticsearch在k8s中部署？

ynwssjx · CMB 　擅长领域：云计算, 容器, 容器云

8 会员关注

不论是IaaS还是PaaS，手工部署ELK都是不推荐的，通过ansible可以自动实现，至于如何实现，可以参考redhat文档：https://docs.openshift.org/3.9/install_config/aggregate_logging.html至于说分布式存储、本地存储还是集中存储，这个没有既定答案，都是可以参考行业实现，比如Redhat就是...

互联网服务数据安全·2018-05-19

rein07 · 某证券　擅长领域：人工智能, 大数据, 机器学习

583 会员关注

这是个浩大的工程，牵扯方方面面，首先要在领导层面得到支持，不然事情无法正常推进下去；其次，需要成立数据治理委员会或类似的组织，相关系统或有数据治理需求的人都要加入，对数据情况进行梳理，包括元数据及主数据；再者就需要制定数据统一的标准，这样有问题的或者不标准的数据才能根据...

数据治理·2017-11-24

王作敬 · 银河证券　擅长领域：云计算, 容器, 容器云

169 会员关注

作者：汪照辉　王作敬——中国银河证券股份有限公司信息技术部IT研发中心--摘要微服务实施的不仅仅是微服务开发微服务技术的问题，更涉及到数据治理、人才培养、架构设计、系统集成等多个方面，微服务实施之道从人才培养、数据治理、事件驱动架构、微服务治理等几个关键方面来...(more)

赞同6

专栏：最佳实践

大数据·2017-10-24

大数据和Hadoop时代的维度建模

silencely · 阿里　擅长领域：云计算, 大数据, 数据库

89 会员关注

UliBethke发表的这篇文章，介绍了数据建模到维度建模，以及数据仓库和反规范化一系列知识。比较了MPP和Hadoop的不同，并对如何在大数据和Hadoop平台上进行维度建模，给出了很好的建议和方案。维度建模已死？在回答这个问题之前，让我们回头来看看什么是所谓的维度数据建模。为什么需...(more)

赞同4

Redis·2017-10-11

Redis 和 Memcached 的区别在哪里？

该来的总会来 · 华润　擅长领域：大数据, 分布式系统, 服务器

119 会员关注

Redis的作者SalvatoreSanfilippo曾经对这两种基于内存的数据存储系统进行过比较：Redis支持服务器端的数据操作：Redis相比Memcached来说，拥有更多的数据结构和并支持更丰富的数据操作，通常在Memcached里，你需要将数据拿到客户端来进行类似的修改再set回去。这大大增加了网络IO...(more)