大数据平台
大数据平台
大数据平台是为了计算,现今社会所产生的越来越大的数据量。以存储、运算、展现作为目的的平台。
大数据平台是为了计算,现今社会所产生的越来越大的数据量。以存储、运算、展现作为目的的平台。

热点

银行数据安全·2023-09-08
xuyy秦皇岛银行 擅长领域:大数据, 大数据平台, 数据库
6 会员关注
结合我们行的情况,要想对数据进行分类分级,先要进行数据资产的梳理,一般厂商数据分类分级平台都有一个简单的资产梳理功能,是基于数据库层面而非业务层面的资产梳理。根据资产梳理的情况,根据 中国人民银行发布《金融数据安全 数据安全分级 指南 》(JR/T 0197—2020) 进行数据...
医院大数据·2023-07-21
陈健武汉市中心医院 擅长领域:大数据, 大数据平台, 存储
9 会员关注
科研大数据需要的硬件需要结合建设内容。如果是传统的客养大数据平台,主要的工作数数据采集处理存储机上NLP,普通的集群和存储也可以满足,但是内存需要的资源会多一些,存储资源要大,毕竟基于数据的处理,可以考虑SSD。如果是多模态的科研平台,包括需要在这个科研平台上嫁接大模型...
数据库·2023-06-14
课题概要本文的主要目标是解决大数据平台中元数据库MYSQL的异常故障。通过分析应用响应缓慢的问题,我们找到了集群组件HIVE和元数据库MYSQL的原因。通过日志分析、工具检测和专家指导等一系列方法,最终确定问题的根源是大数据集群中租户的不规范使用所导致,并逐步解决了这个...(more)
浏览903
评论1
服务器系统·2023-06-13
1.问题环境基本信息系统环境物理机/虚拟机/云/容器:物理机网络环境外网/私有网络/无网络:私有网络硬件环境机型:InspurCS5280H/CS5280H处理器:Hygo整机类型/架构:X86软件环境具体操作系统版本:V10-SP2-Server-0524内核版本:4.19.90-24.4.v2101.ky10.x86_642.问题描述三台物理服...(more)
浏览1201
评论1
xuyy秦皇岛银行 擅长领域:大数据, 大数据平台, 数据库
6 会员关注
大数据平台是为了计算现今社会所产生的越来越大的数据量,以存储、计算、展现作为目的的平台。它是一个集数据接入、数据处理、数据存储、查询检索、分析挖掘等、应用接口等为一体的平台。大数据平台可以提高数据管理效率,并且快速获得有价值信息,可以轻松地共享资源。这样就...(more)
专栏: 最佳实践
浏览2703
IT咨询服务大数据平台·2023-01-16
xuyy秦皇岛银行 擅长领域:大数据, 大数据平台, 数据库
6 会员关注
1) 通过系统日志采集大数据 用于系统日志采集的工具,目前使用最广泛的有:Hadoop 的Chukwa、ApacheFlumeAFacebook的Scribe和LinkedIn的Kafka等。这里主要学习Flume。 Flume是一个高可靠的分布式采集、聚合和传输系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据,同...
IT咨询服务大数据平台·2023-01-16
xuyy秦皇岛银行 擅长领域:大数据, 大数据平台, 数据库
6 会员关注
大数据平台的总体架构设计从下向上依次为: 数据源:支持多种数据源,可以实现接入多个业务系统数据进行接入整合; 接入层:业务数据库定时同步和基于canel的实时同步结合,日志数据实时接入,互联网海量数据实时爬取清洗; 存储层:HDFS分布式文件系统实现海量数据存储,Hbase提供实时数据...
互联网服务PostgreSQL·2022-12-14
lulihuan1987张家港行 擅长领域:数据库, 服务器, 分布式系统
18 会员关注
大数据量迁移,数据库层面应该是同构同版本吧,如果是的话,一般都是要提前迁移准,停机窗口增量的模式迁移,否则那么大的数据量8小时很难完成。另外可以借鉴一些数据库厂商的工具进行迁移。至于x86和arm的性能差异,这个和CPU型号,数据库以及SQL等都有关系,具体还是要做对比测试和性...
Hadoop·2022-09-28
yh2022lat中国联通 擅长领域:服务器, 存储, 数据库
22 会员关注
收藏1
金币20
大数据·2022-09-07
奔跑的蜗牛武汉家事易农业科技有限公司 擅长领域:数据库, 云计算, 服务器
47 会员关注
收藏1
金币50

描述

大数据平台是为了计算,现今社会所产生的越来越大的数据量。以存储、运算、展现作为目的的平台。
大数据平台是为了计算,现今社会所产生的越来越大的数据量。以存储、运算、展现作为目的的平台。
X社区推广
  • 提问题