大数据平台 - 主题 - twt企业IT交流平台

大数据平台

大数据平台

大数据平台是为了计算，现今社会所产生的越来越大的数据量。以存储、运算、展现作为目的的平台。

1000 会员关注

265 会员贡献

112 关系主题

问题

问题
热度排序 时间排序

系统集成大数据平台·2021-12-25

大数据平台服务器网卡配置？

o0呼噜Zz · 机密　擅长领域：云计算, 存储, 一体化运维

32 会员关注

一般万兆，或者百G网卡，高冗余性肯定需要双网卡，肯定用bond，正常做主备模式。

浏览938

系统集成存储管理·2021-12-25

HDFS 一致性问题？

zftang · 小白一枚　擅长领域：数据库, 云计算, 服务器

64 会员关注

最终一致性吧

浏览826

系统集成大数据平台·2021-12-25

HDFS元数据在内存中掉电不丢失相关问题？

zftang · 小白一枚　擅长领域：数据库, 云计算, 服务器

64 会员关注

能实时写入最好，因为元数据量非常的小

浏览1114

系统集成大数据平台·2021-12-25

HDFS数据块？

zftang · 小白一枚　擅长领域：数据库, 云计算, 服务器

64 会员关注

冷数据考虑用大块

浏览975

系统集成大数据平台·2021-12-24

spark stream数据切分原则？

奔跑的蜗牛 · 武汉家事易农业科技有限公司　擅长领域：数据库, 云计算, 服务器

62 会员关注

Spark 文件切分规则同时 spark 也要判断数据大小是否大于切片大小的11倍如果大于才按切片大小进行切分

浏览992

系统集成容器·2021-12-24

spark容器运行任务数量如何优化？

浏览660

系统集成spark·2021-12-24

spark数据切分原则？

奔跑的蜗牛 · 武汉家事易农业科技有限公司　擅长领域：数据库, 云计算, 服务器

62 会员关注

Spark 文件切分规则同时 spark 也要判断数据大小是否大于切片大小的11倍如果大于才按切片大小进行切分。

浏览991

系统集成大数据·2021-12-24

spark executor容器内存如何规划？

浏览710

系统集成spark·2021-12-24

spark的executor容器资源如何规划？

浏览607

系统集成spark·2021-12-24

Spark完全可以取代mapreduce吗？

奔跑的蜗牛 · 武汉家事易农业科技有限公司　擅长领域：数据库, 云计算, 服务器

62 会员关注

不能，这个是要分应用场景的

浏览884

描述

大数据平台是为了计算，现今社会所产生的越来越大的数据量。以存储、运算、展现作为目的的平台。

1000 会员关注

265 会员贡献

112 关系主题

主题组织结构热门关系主题

关注13171 大数据

关注882 Hadoop

关注74 OpenShift

关注13951 数据库

关注938 Kubernetes

关于TWT 使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
© 2024talkwithtrend — talk with trend,talk with technologist 京ICP备09031017号-30

X社区推广

关注主题1000