大数据多租户管理问题 (立项调研)

运营商的数据接入应用都涉及到很多部门,也是非常头疼的问题。这样如果对于不同的应用/数据使用不同的集群,就涉及到数据共享问题,这肯定是难以接受的,也不符合大数据的架构特点。而使用同一个集群就涉及到应用资源抢占(比如CPU 内存)的问题,每个应用都应该都一个特定的资源比例,...显示全部
运营商的数据接入应用都涉及到很多部门,也是非常头疼的问题。
这样如果对于不同的应用/数据使用不同的集群,就涉及到数据共享问题,这肯定是难以接受的,也不符合大数据的架构特点。而使用同一个集群就涉及到应用资源抢占(比如CPU 内存)的问题,每个应用都应该都一个特定的资源比例,比如A应用理论能使用集群80%的资源,B应用重要性比较低使用20%的资源,在实际执行中如何达到这样资源隔离的效果。
另外数据的安全管控是一个问题,希望达到一个多应用、多数据管控公用的集群效果,有什么好的建议?收起
参与22

查看其它 14 个回答zhangfengyu的回答

zhangfengyuzhangfengyu信息分析/架构师中国电信
回复 9# xuyanhui


    了解了一下kerberos&ldap和yarn scheduler,这个比较满足我们的需求。谢谢
!我们后续会深入了解一下。
电信运营商 · 2015-03-11
浏览3636

回答者

zhangfengyu
信息分析/架构师中国电信
擅长领域: 大数据虚拟化云计算

zhangfengyu 最近回答过的问题

回答状态

  • 发布时间:2015-03-11
  • 关注会员:2 人
  • 回答浏览:3636
  • X社区推广