POWER8技术动态发布会系列二:
拥抱MongoDB、Spark等开源技术,Linux on Power大数据技术(网络直播)
活动介绍:
随着开源技术大行其道,企业越来越多地选择开源技术与平台,以应对大量非结构化数据分析需求及新兴工作负载类型带来的挑战。基于Linux的POWER8在兼容性和性能方面有了极大提升,为企业保障其在开源环境下的高性能计算及大数据分析表现。基于Linux on Power架构,Spark、MongoDB、亚信、SAP HANA等得以在大数据分析、内存数据库应用等方面为企业升级应用体验。
2016年9月21日14:00-16:00,AIX专家俱乐部举办“拥抱MongoDB、Spark等开源技术,Linux on Power大数据技术”POWER8技术动态线上发布会,组织观看“2016 Power远见者盛典”大数据方向的精彩演讲、邀请社区多位Linux on Power专家分享经验,帮助大家具体了解Power8在大数据方向的新特性和最佳实践。
了解更多关于POWER8的新特性,请点击查看“2016 Power远见者盛典精彩回顾”
活动日程:
14:00-14:20 | Spark加速大数据在企业落地 曾永华 IBM资深大数据解决方案架构师 分享内容: IBM在Spark上的措施和行动:核心代码贡献;人才培养;Linux on Power对Spark的优化 Spark对IBM解决方案的影响:IBM把很Spark视为数据分析的操作系统。IBM将很多产品和solution基于Spark设计,为企业提供更好的数据分析服务。 Spark在交通行业的应用:某地市的交通局,每天产生几亿条的数据,需要进行ETL、去重、过滤等准备,再做算法模型,对人、车、路进行分析、统计、预测。流处理用、核心算法模型、交通预测等都用到Spark的相关组建。 Spark在气象行业的应用:某气象局每天处理的数据300TB左右,请求用户在上亿,有实时性的数据分析、历史性的数据,都用到了Spark的不同组建。 IBM Linux on Power和Spark结合的优势:Spark是一种数据密集型的计算,对内存有很高的要求。Power的芯片刚好能够满足这种要求。Linux on Power的性能要比同等CPU的x86高出2倍左右。 |
14:20-14:40 |
高性能数据库的新动力 唐建法 MongoDB大中华区首席架构师 分享内容: 在中国,百度、腾讯、阿里巴巴、京东、360等都有大量使用MongoDB。在传统行业,华为、东方航空、平安银行、中国移动、中国联通也都有使用MongoDB 东方航空MongoDB使用情况:为实现新一代个性化搜索、主题搜索、地图搜索,对后台的系统需求大了10倍、100倍。通过计算,这对原先的Oracle数据库的性能要求提高100倍。使用MongoDB航班库存系统,每秒几万次查询,3台服务器就能满足需求。 MongoDB和IBM Linux on Power结合给客户带来的优势:MongoDB是一个高性能的数据库,需要高性能的计算节点。CPU方面,Power是微处理器结构和MongoDB的架构是接近的,8个程序可以在一个Core上跑,相当于是intel的4倍,TB级的数据支持非常好。IO方面,在CAPI技术可以让数据从存储到CPU的过程大量提高了效能,在同样时间可以提高到4倍数据。 X86架构和Power架构比较:HP24核 vs POWER816核,POWER8 每秒30万次OPS,HP每秒17万次,POWER8高于HP2.6倍。最近在美国信用卡POC测试,POWER8比X86高于3.7倍。 |
14:40-15:00 |
基于Power的运营商大数据平台分享 刘杲 亚信科技(中国)有限公司规划部总经理 分享内容: 运营商的数据类型:生产域数据(如CRM、BOSS);企业管理域数据(如ERP、运营成本);网络承载域数据。 运营商数据分析第一层:运营商数据做大量集成、封装,提供分析服务,比如客户来源去向分析、用户价值标签分析、运营商人员流动分析。 运营商数据分析第二层:提供数据服务产品,为外行业提供位置定位服务、为互联网企业提供互联网偏好服务、识别用户账户信用度服务。 运营商数据服务第三层:数据服务的组装,位置营销、城市交通规划、智慧旅游、智慧城市。 |
15:00-16:00 | 互动交流 |
-
Spark加速大数据在企业落地
-
高性能数据库的新动力
-
基于Power的运营商大数据平台分享
- 大数据环境对于高网络I/O场景下的PowerVM网络性能 关注问题4 回答问题 浏览4372回复2
- PowerVM虚拟化技术在大数据分布式计算条件下的适用性 关注问题3 回答问题 浏览3471回复1
- Spark sql性能优化主要从哪方面考虑? 关注问题5 回答问题 浏览4179回复1
- 基于大数据的比较成熟oltp工具有哪些? 关注问题3 回答问题 浏览3661回复1
- mongodb与db2的比较 关注问题4 回答问题 浏览4730回复1
- power8相较于power7主要提升在哪些方面 关注问题2 回答问题 浏览3647回复1
- 商业系统如何与开源保持同步 关注问题2 回答问题 浏览3336回复1
- 对开源的支持力度到底多大 关注问题3 回答问题 浏览3150回复1
- Spark在其他行业的应用如何?优势在哪里 关注问题2 回答问题 浏览3736回复1
- power8应用在spark技术上,特点有哪些? 关注问题2 回答问题 浏览3891回复1
- spark资源管理 关注问题2 回答问题 浏览4153回复1
- spark streaming能替代storm吗? 关注问题3 回答问题 浏览6186回复2
- spark sql使用中在商用环境下的使用率如何? 关注问题2 回答问题 浏览3886回复1
- spark金融行业应用 关注问题2 回答问题 浏览4349回复1
- mongoDB优势及发现趋势 关注问题3 回答问题 浏览3850回复1
- DB2向mongoDB进行数据迁移,有没有比较成熟的案例 关注问题2 回答问题 浏览3663回复1
- mongoDB数据库集群一般适用于那些客户环境? 关注问题2 回答问题 浏览4108回复1
- 发布会视频里嘉宾提到的IBM大数据技术培训平台,有相关的链接吗? 关注问题3 回答问题 浏览4014回复2
- mongodb支持多表关联吗? 关注问题3 回答问题 浏览3489回复1
演讲嘉宾
MongoDB大中华区
首席架构师
IBM
资深大数据解决方案架构师
亚信科技有限公司
规划部总经理
互动嘉宾
山东移动
业务支撑系统资深架构师
负责CRM、BOSS、大数据以及公司资源池等系统平台的规划、建设和运维等工作,共获得国家级创新奖1项、通信行业级科技进步奖2项、移动集团级业务服务创新3项,并申请发明专利13项。
中国人民银行清算总中心支付系统开发中心
技术经理
第九届AIX&Linux高手挑战赛十强选手。多年从事系统集成和运维工作,对数据中心的建设,系统集成,运维等都具备丰富的经验。精通PowerVM、KVM等虚拟化技术,熟悉AIX、Linux操作系统,曾主持设计利用OpenStack平台技术在企业私有云的落地实现。
IBM
资深系统架构师
参考阅读
- IBM Linux on Power解决方案
- 某电信企业大数据平台架构选型经验分享
- 地铁行业大数据应用场景探讨
- 基于Hadoop、ELK和Spark等开源技术的银行运维日志分析平台架构设计探讨
- 工业4.0趋势下, 汽车制造企业如何进行IT系统整合架构设计?
- 证券行业移动业务架构选型探讨
- 保险行业电商业务基于Redis的架构探讨
参与会员 407
- 会后视频可以重播
- 好像真是录像
- MongoDB与gemfire比较的优缺点,项目中已经广泛用了DB2,个别用了gemfire,MongoDB在了解中
- 会后有视频下载么?
- 重播啊
- 我们在看录像吗