如何对PB级甚至EB级的海量非结构化数据进行有效管理？ - twt企业IT交流平台 - talkwithtrend，企业IT技术社区，帮助您融入同行！

如何对PB级甚至EB级的海量非结构化数据进行有效管理？

: qq373793057系统工程师某银行
关注289
个人主页
Ta的精彩回答
随着数据存储的发展，硬件平台更快更好，对数据结构模式是否需要区分对待？
赞同，对待不同的数据类型，要实现分而治之，才能充分发挥硬件平台的优势。针对各业务系统所...0赞同
传统型结构化数据库未来出路在何方？
目前在业内使用非结构化数据的应用场景已经越来越多，如您所提到的银行和社保行业中，客户...0赞同
对数据进行查询、汇总时如何提高执行效率？
在传统的关系型数据库中对结构化数据的查询优化，己经有一套成熟方案。查询优化的方法可...0赞同
结构化数据如何与非结构化数据结合，技术上如何实现？
这两者的结合，大多发生在要通过关系型数据库对非结构化数据进行统一管理和检索的过程中...0赞同
现有系统中有150G容量的非结构化数据，但备份和管理都很慢，请问有什么办法来管理和优化吗？
海量小文件的备份和管理处理起来确实比较麻烦，目前针对非结构化数据所用的文件系统、分...1赞同
海量非结构化数据的安全性如何保证？
对于非结构化数据数据的安全性问题，个人认为，应该着重关注两个方面：1、所使用数据平台的...0赞同
海量非结构化数据的应用场景有哪些？
非结构化数据的应用场景有很多，我们身边的网页日志、邮件、音视频这些都是具体的使用场...0赞同
有使用对象存储的实际应用吗？
对象存储能够简易部署和配置，相比于传统存储来说，对象存储的扩展性极强，非常适用于海量非...1赞同
基础设施设计规划过程对非结构化数据（大数据应用）重点做好哪些设计和规划？
1、存储选择时的成本比较，还是要从实际业务入手，如果是对数据扩展性要求高、需求变化快...2赞同
是否针对海量数据有一整套的系统架构解决方案
非结构化数据的整体架构规划和传统数据平台的几个层次大致相同，但在每个层次的规划过程...0赞同
NETAPP FAS8040和IBM N6040NAS存储的性能问题
提供下NETAPP FAS8040存储查看IOPS的命令：qos statistics performance show...1赞同
银行业海量非结构化数据管理和有效利用方案？
没错，在做好非结构化数据的管理和存储后，接下来就是考虑如何能够充分利用非结构化数据实...1赞同
结构化数据和非结构化如何统一规划和管理
分布式计算环境并没有直接改变结构化数据或者非结构化数据的存储和管理方式。只是给海...1赞同
非结构化数据如何分类管理和存储
在活动主题中，已经列举了几种常见的针对非结构化数据的管理方式：1、NAS存储所提供的基于...0赞同
如何对于海量数据进行访问权限划分？
两种解决思路：1、使用数据平台现有的身份认证模块，如Hadoop的Hive框架可直接使用Kerbero...2赞同

: bryan软件架构设计师金融研发
数据库、云计算、应用架构设计、新技术研究
关注335
个人主页
Ta的精彩回答
如何实现异构分布的非结构化数据统一管理？
我们之前见过一个这种情况的架构，采用“逻辑统一、物理分散”的建设思路1.统一访问入口...0赞同
企业现有的NAS存储如何根据业务数据的大量激增来进行选型和扩展？
一旦到大数据量，一般都采用分布式系统架构，这样的情况下个人建议采用分散存储，存储多份的...0赞同
海量非结构化数据的应用场景有哪些？
非结构数据和结构化数据是相对应的，非结构化数据需要按照文件系统方式存储，而结构化数据...0赞同
对于非结构化数据，可以进行进行压缩删重等工作？有什么需要注意点？
非结构数据一般会占比较多的存储，在实际使用过程中，我们有如下体验根据业务场景，有的都是...6赞同
如何对于海量数据进行访问权限划分？
一般海量数据存储都是面对多个业务应用系统，而每个业务系统的重要性、数据量和数据生命...0赞同
如何对于海量数据是否要划分多个资源池？
资源池都有资源使用量等限制，感觉本质上和多租户对资源的限制类似...1赞同

: Jhon技术经理小学生
爱技术，爱生活
关注5
个人主页
Ta的精彩回答
企业现有的NAS存储如何根据业务数据的大量激增来进行选型和扩展？
其实站在存储在角度来分析性能的话主要考虑几个点1.硬盘本身的一个性能2.硬盘之上就是...0赞同
影响分布式文件系统（如HDFS、GPFS）性能的因素有哪些？
从数据分布的情况去分析1.热点数据分布不均衡2.各个磁盘的实际使用量差距3.缓存这块的...0赞同

在本场活动提问

活动明星榜

课题专家组

系统工程师某银行

本场活动获赞 10

软件架构设计师金融研发

本场活动获赞 8

研发工程师Alibaba

本场活动获赞 4

高级技术主管国内某金融科技公司

本场活动获赞 1

系统工程师第十区。散人

本场活动获赞 1

项目经理长春长信华天

本场活动获赞 1

其它The Global 500

本场活动获赞 1

IT顾问某金融科技公司

本场活动获赞 1

项目经理新浪云计算

本场活动获赞 1

关于TWT 使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
© 2024talkwithtrend — talk with trend,talk with technologist 京ICP备09031017号-30

X社区推广