如何进行合理的数据管理，包括数据的获取、存储、处理、挖掘？ - twt企业IT交流平台 - talkwithtrend，企业IT技术社区，帮助您融入同行！

如何进行合理的数据管理，包括数据的获取、存储、处理、挖掘？

: wangql系统工程师NULL
主机、存储、虚拟化和备份
关注1223
个人主页
Ta的精彩回答
【核心议题】实行数据全生命周期管理的有什么好处？
先谈一点自己的看法，抛砖引玉不管什么类型的数据，基本上都具备生命周期的特性。前些年企...9赞同
【核心议题】数据生命周期管理的几个阶段，以及各阶段如何匹配存储？
数据本身是具备生命周期的特性的，其原理为：随着时间的积累，数据访问频次变化和数据量累积...4赞同
【核心议题】数据生命周期管理中，如何合理选择不同的技术和方案？
说实话，这个话题提的确实有点大。不管是我们说的数据生命周期管理，还是今年来比较火热的...2赞同
【核心议题】在数据生命周期管理实现过程中，与原有的存储数据分层或备份等方案是否冲突，如何匹配？
在很多情况下，规划跟不上需求，甚至是被需求倒逼着走。在某一阶段为解决特殊的问题而提出...3赞同
怎样合理处理数据和挖掘数据？
处理和挖掘同时包含了对在线和近线、归档数据的处理要求。对应在线数据来说，直接被当前...0赞同
IBM的GPFS、TSM HSM、LTFS等等都有涉及到数据的生命周期相关内容，他们各自特点有哪些？
伟光的图非常不错个人认为gpfs更偏向在线数据处理 hsm一般用在和备份方案集成的分层存...0赞同
陈旧，混乱的数据如何分离
这个确实更偏向管理问题，但是作为技术，既然摊上了，就尽量在自己的职责范围内解决一些，毕竟...8赞同
大数据方向的管理
数据爆炸抛弃正确增长的原因外，一般都和生命周期的阶段规划有关。比如规划了在线和近线...0赞同
较大的离线数据进行迁移和回迁的性能是否会有瓶颈？
你说的情况确实会有这里就是取舍问题使用率小的被放到廉价存储上，比如磁带已经...0赞同
数据全生命周期管理中对数据销毁是怎么完成的
还是得看我们采用什么样的解决方案。如果单纯的存储分层，那么只能通过主动的方式对数据...2赞同
数据管理过程中，如何解决大量数据查询速度很慢的问题？
这个应该就是初期设计和定位的问题了。首先，先确定对数据和存储的分层基于一个什么样的...0赞同
数据生命周期管理中对已经没有用但又不想删除的数据可以怎么处理和二次挖掘？
准确来将应该不是已经没有用的，是暂时还没二次发掘的。一般对归档历史数据再次详细划分...0赞同
对于下线业务的数据如何处理？
都不使用了，归档存放吧，放到廉价存储上，比如磁带，原则是用的时候能找回来就行。...0赞同
数据迁移有cdc dsg ogg等多种产品，大家都使用过哪些产品？使用情况如何？
只使用过cdc和ogg，dsg没用过如同楼上所说，这几款都是同步产品。一般做高可用或容灾用。...0赞同
存储自带备份功能咨询？
一般存储的备份都是作为功能来实现的，如基于时间点的快照和基于block复制的克隆。现在...0赞同

: y18511664518技术总监长城超云
专注智能运维软件研发，打造好用的企业级云智维平台
关注601
个人主页
Ta的精彩回答
【核心议题】数据生命周期管理的几个阶段，以及各阶段如何匹配存储？
数据生命周期应该按照不同的维度来区分，而且不同的行业性质不同，分类方法也不会一样；一般...1赞同
【核心议题】在数据生命周期管理实现过程中，与原有的存储数据分层或备份等方案是否冲突，如何匹配？
最安全稳定的方法就是逐步改造，直接重建对大多数企业都不太适合；挑最重要的，最急需改造的...0赞同
数据全生命周期管理中对数据销毁是怎么完成的
数据销毁不是解决方案，而是制度，多久销毁，如何销毁，都是直接体现，规划好的，不同的行业归档数...0赞同
数据管理过程中，如何解决大量数据查询速度很慢的问题？
标题里既然选用了大量数据，就还没到大数据的范畴，建议分类存储，就算已经归档，也要把需要查...0赞同
对于下线业务的数据如何处理？
既然名称就是下线业务，说明这方面的业务已经废弃，但是任何数据对一个企业来说，都有其重要...4赞同
数据迁移有cdc dsg ogg等多种产品，大家都使用过哪些产品？使用情况如何？
数据迁移来说，要看你使用的是什么数据库，迁移的目的，数据量大小，是否需要同步源数据库的数...6赞同
在数据生命周期开始调整时，基于成本考虑，如何降低对现有业务运行的影响?
首先，要清楚为什么调整，是否真的到了规划中数据生命周期调整期，然后才会根据具体的业务进...4赞同
谁能用最通俗移动的方式介绍一下什么是数据挖掘。数据挖掘的工作过程？
这个问题，我转载一下一篇感觉不错的，你可以参考一下是知识发现、商业智能、预测分析还是...10赞同

: bryan软件架构设计师金融研发
数据库、云计算、应用架构设计、新技术研究
关注335
个人主页
Ta的精彩回答
【核心议题】实行数据全生命周期管理的有什么好处？
补充一点通过数据的合理划分和存储，能够提高整个应用系统的处理能力。...0赞同
【核心议题】数据生命周期管理的几个阶段，以及各阶段如何匹配存储？
按照我们的实践，数据生命周期分为1）在线热数据：最近一段实践业务经常用到的数据，比如最近...3赞同
在大数据领域，一般的数据生命周期是多长？
数据的生命周期和业务紧密相关，是业务属性，比如有的业务要求保存5年，有的业务要求保存3年...5赞同
合理的数据管理前，如何对数据进行分类？
我们的经验是数据服务于业务，数据分类要业务优先1.先对数据进行业务属性归类，比如每个业...1赞同
陈旧，混乱的数据如何分离
一般单位都是采用“只要没问题就不要动”的原则。现在针对这种混乱情况，首先得领导有改...4赞同

: hongyehongye数据库管理员哈尔滨银行
关注97
个人主页
Ta的精彩回答
【核心议题】数据生命周期管理的几个阶段，以及各阶段如何匹配存储？
在线归档往往是大家比较关注的点但是往往会漏掉销毁销毁一般需要在上线的时候就加...1赞同
数据全生命周期管理中对数据销毁是怎么完成的
数据清理现在一般都采用物理删除或完全归档到磁带封存的情况比较多...0赞同

在本场活动提问

活动明星榜

系统工程师NULL

本场活动获赞 28

y18511664518028

技术总监长城超云

本场活动获赞 25

软件架构设计师金融研发

本场活动获赞 13

haizdl101634

技术经理大连

本场活动获赞 6

系统工程师第十区。散人

本场活动获赞 5

其它日志易

本场活动获赞 3

星星峡的风017

技术支持工程师福建新大陆软件有限公司

本场活动获赞 3

hongyehongye002

数据库管理员哈尔滨银行

本场活动获赞 1

系统运维工程师新大陆

本场活动获赞 1

关于TWT 使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
© 2024talkwithtrend — talk with trend,talk with technologist 京ICP备09031017号-30

X社区推广