大数据(Big Data),是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合。具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。...(more)
大数据·1天前
大数据平台都基于容器话部署了,那请问类似CDH、星环等大数据平台产品还需要继续采购吗?这些产品与容器化部署是一个什么样的关系?
浏览140
大数据·1天前
请问大数据平台容器化之后,flink、spark等计算任务运行到容器上了,那相应原有部署模式下计算任务读写数据存储的HDFS运行在哪里?读写性能相对原有物理机部署模式有多大差异?
浏览120
银行Kubernetes·1天前
flink任务在容器云集群中运行时,需要将一部分数据放在容器中处理,如果放在本地盘可能会将文件系统占满,影响到其他容器的运行;如果存算分离,可能IO不能满足需求。建议采用哪种方式?...(more)
浏览128
银行大数据·2天前
生产环境上在离线业务混合部署实现需要用到k8s的弹性扩缩容,而弹性扩缩容的上限又涉及到命名空间的quota限制。那么当一个新系统上线k8s的时候,是否应该限制命名空间的cpu\内存的quota,如果要限制的话,如何配置才是合理的。...(more)
浏览165
机器学习·2024-03-08
目前是技术方案选择的问题我们目前拥有离线区块链交易数据数据体量:30亿条交易数据,每条交易包含10个字段(主要的字段:发送地址、收款地址、交易类型、交易金额)我们想做的:根据业务需求提出分析策略,利用机器学习建立模型输出分析结果,为交易地址打上标签策略比如:实体聚集:多个账...(more)
浏览939
软件开发MySQL·2024-03-04
请问各位大拿,实际生产环境中,MySQL写到Redis读的过程是实时还是异步?即Redis是否需要立刻支持读到前端写的数据?如果是异步的,时延一般是多少,比如XX秒还是XX分钟?
浏览1963
软件开发Redis·2024-02-28
测试数据用sysbench写20个表x每表25000条数据,同步到redis要花半小时。请问各位大拿,问题出在什么地方呢?
浏览1304
    X社区推广