Hadoop
Hadoop
Apache Hadoop是一款支持数据密集型分布式应用并以Apache 2.0许可协议发布的开源软件框架。它支持在商品硬件构建的大型集群上运行的应用程序。
Apache Hadoop是一款支持数据密集型分布式应用并以Apache 2.0许可协议发布的开源软件框架。它支持在商品硬件构建的大型集群上运行的应用程序。

问题

互联网服务信创·2022-12-14
匿名用户
8个小时做迁移肯定是不够的,所以这样的情况下只能做割接不能做迁移,性能也没有做测试,架构也没有做测试,像这种情况下架构肯定是要调整的,所以只能调整架构以后,业务测试通过以后,8个小时来做割接。算算你将近500tb的数据,8个小时,你通过网络来进行迁移,传输数据的时间都不够。...
事业单位医疗大数据平台·2022-03-03
zyp8365 · 广东省中医院 擅长领域:大数据, 存储, 大数据平台
19 会员关注
底层基础架构设计不仅要考虑技术因素(性能、一致性要求、SQL兼容性要求),也要考虑包括架构产品的生态成熟度、应用架构适配度、团队适应度等非技术因素。Hadoop+MapReduce是典型的分布式文件系统+分布式计算的技术框架,其组件HDFS就是典型的分布式存储架构,分布式存储架构更为...
银行分布式数据库·2021-07-01
atpeace331 · 银行 擅长领域:数据库, 数据库系统改造, 关系型数据库
58 会员关注
个人建议如下,能力经验有限,还请各位专家多多指正,在此谢过!    1、由于银行影像内容管理平台的主要数据类型是 半结构化的影像数据 并且 随着银行互联网业务的迅猛发展需要影像平台的资源能够弹性地横向扩展及很高的图像读取性能。因此 传统的Oracle/DB2架构这种集...
互联网服务Hadoop·2020-11-02
匿名用户
能考虑到Hadoop集群容量,说明是非常重要业务。异地备份方案有两种:1.采用专业的软件,建立一个比较好的频分多路网络,通过专业的软件做数据复制。譬如:veritas,具体可以询问相关软件厂商。2.采用异地间集群复制譬如: DistCp,本地集群HDFS设置为2份,异地集群HDFS设置为1份。硬件成本...
银行数据中台·2020-07-31
左右 · ex-IBM 擅长领域:大数据, 商业智能, 联机分析处理
27 会员关注
简单说说我的想法,---- 直接回答题干 ----如果说现有Hive作为数仓,那么性能肯定不能满足查询的,替代方案可以选择MPP数据库,但是由于MPP数据库目前看来还是有软硬件+人员能力限制条件的,基本上也要搞成一个团体作战项目才能摸索出来。你提到的多表关联倒不是什么障碍,建设数...
能源采矿Hadoop·2020-05-19
zftang · 小白一枚 擅长领域:数据库, 云计算, 服务器
64 会员关注
学习没有捷径,多看资料如果有项目有师傅带着一起搞就好了
银行Hadoop·2020-05-09
zftang · 小白一枚 擅长领域:数据库, 云计算, 服务器
64 会员关注
肯定可以的哇
互联网服务Hadoop·2020-04-17
zhuqibs · Adidas 擅长领域:云计算, 服务器, 存储
57 会员关注
(1)请告知CDH版本(2)运行数月中,运行哪些内容,有无大型的作业运行,是用hive还是impala、spark,或原生的java?

描述

Apache Hadoop是一款支持数据密集型分布式应用并以Apache 2.0许可协议发布的开源软件框架。它支持在商品硬件构建的大型集群上运行的应用程序。
Apache Hadoop是一款支持数据密集型分布式应用并以Apache 2.0许可协议发布的开源软件框架。它支持在商品硬件构建的大型集群上运行的应用程序。
X社区推广
  • 提问题