数据存储 - 主题 - twt企业IT交流平台

热点

证券Kubernetes·2020-01-07

Kubernetes集群数据存储在以下哪个位置？

Luga Lee · None　擅长领域：云计算, 容器, 容器云

43 会员关注

默认存储再在etcd键值存储系统，当然，也可以存储在其他平台

赞同1

回答2

关注3

银行hbase·2019-12-25

hbase的适用场景是？哪些数据适合用hbase来存储？

Luga Lee · None　擅长领域：云计算, 容器, 容器云

43 会员关注

通常用得较多的场景：1、对象存储2、时空数据3、Feeds流4、推荐画像、、、一般来说：面向列的，容量大的数据都可以采用hbase存储

赞同1

回答2

关注3

银行非机构化数据·2018-10-19

影像类等非结构化数据一般如何在大数据平台存储?

sxtycxx · 人工智能（计算机视觉）　擅长领域：存储, 灾备, 服务器

519 会员关注

大数据平台中适合存放数据量极大，而且是一次写入，多次读的应用需求，存储在HDFS分布式文件系统，采用多副本机制保障数据的安全和可靠影像类数据包括视频数据和图像数据，非常适合存放在HDFS中，系统将影像类数据进行切分，按照128MB大小进行切分，然后对每个128MB的数据进行多副本进行...

数据治理·2019-03-20

王作敬 · 银河证券　擅长领域：云计算, 容器, 容器云

169 会员关注

作者：汪照辉王作敬汪照辉个人页面--我们说数据是企业的核心资产，也说过数据的价值在于使用它。但一个企业数据有千千万万，数据来源有万万千千。哪些数据是关键数据，哪些数据是无关紧要，有了数据怎么使用，怎么发挥其价值，是企业在金融科技发展迅猛的今天需要认真考虑的问题。数字...(more)

赞同3

专栏：趋势观点

能源采矿分布式存储·2019-03-21

制造企业的私有云环境下数据存储选择哪种模式好？分布式存储还是传统型磁盘阵列？哪些数据适合分布式？

pysx0503 · 第十区。散人　擅长领域：存储, 备份, 服务器

747 会员关注

正常分布式应该比较适合那种非结构化的文档，-大型运算应用我觉得更适合san架构，还有一个问题，就是企业自建私有云的时候分布式的存储可能会现在产品差距比较大可能自己维护下来要要相对来说难度大一些，...

赞同8

回答4

关注5

互联网服务elastic·2018-10-19

使用开源版本的elastic存储日志数据时，存在哪些局限性?

windix

· 某证券公司　擅长领域：大数据, 数据库, 大数据平台

379 会员关注

ES 2.3.0遇到的问题：（1）性能问题·大量数据的集中导入会导致ES性能下降，例如，查询响应时间变长、建index等命令会超时。·数据量大的时候，节点重启会需要很长时间初始化shards。（2）功能问题·不能实时导入数据。·有刷新间隔，最低1s。·没有真正的数据更新及删除功能，重新导入数据d...

大数据·2018-08-20

garyond · 某科技公司　擅长领域：大数据, 数据治理, 数据仓库

3 会员关注

随着大数据应用的爆发性增长，大数据应用已经衍生出了自己独特的架构，而且也直接推动了数据存储、网络及计算技术的快速发展。毕竟处理大数据这种特殊的需求是一个新的挑战。硬件的发展最终还是由软件需求推动的，就这个例子来说，我们很明显的看到大数据分析应用需求正在影响着...(more)

赞同4

保险区块链·2018-07-18

数据量如何估算？

steelshark · 中智智人（贵州）信息技术有限公司北京分公司　擅长领域：服务器, 分布式系统, 区块链

4 会员关注

数据存储量确实会大幅增加，可以靠实际测算得到存储量的消耗，不过，硬件存储成本在整个开支中占比不大。积分系统如果很小，不必自备节点，可以选择依附和使用几个大节点。

赞同4

回答1

关注2

电信运营商Kubernetes·2018-07-11

elasticsearch在k8s中部署？

ynwssjx · CMB 　擅长领域：云计算, 容器, 容器云

8 会员关注

不论是IaaS还是PaaS，手工部署ELK都是不推荐的，通过ansible可以自动实现，至于如何实现，可以参考redhat文档：https://docs.openshift.org/3.9/install_config/aggregate_logging.html至于说分布式存储、本地存储还是集中存储，这个没有既定答案，都是可以参考行业实现，比如Redhat就是...

赞同7

回答4

关注6

Redis·2017-10-11

Redis 和 Memcached 的区别在哪里？

该来的总会来 · 华润　擅长领域：大数据, 分布式系统, 服务器

119 会员关注

Redis的作者SalvatoreSanfilippo曾经对这两种基于内存的数据存储系统进行过比较：Redis支持服务器端的数据操作：Redis相比Memcached来说，拥有更多的数据结构和并支持更丰富的数据操作，通常在Memcached里，你需要将数据拿到客户端来进行类似的修改再set回去。这大大增加了网络IO...(more)