我们有一套成熟的产品，支持异构数据源、实时同步、离线调度、数据地图、元数据等功能，有需要可以联系交流下

分批提取，不要一次全搞，你这个明显是数据量太大了。补充一点，优化下你的语句。

spark分布式搭建方式大致分为三种：standalone、yarn、mesos。standalone是官方提供的一种集群方式，企业一般不使用。yarn集群方式在企业中应用是比较广泛的。mesos安装适合于超大型集群。1、在使用spark sql作为etl抽取数据时，可通过程序逻辑将源表划分为多个数据段，对每个数...

LZ 先把你现有的数据情况描述清楚 cognos有自带求均值的函数，average 和 running-average ，LZ可以看一下这两个函数的用法

回复 5# iqlife     ODS层使用的是Sybase ASE数据库，从十几个分布数据库中同时增量抽取数据进入ODS库，24万数据大约需要12分钟，其中包括抽取前一些准备工作（记录最新时间戳，真正写入ods的过程应该是6分钟）；然后在IQ端编写存储过程，用Location insert into方式插入IQ的...

回复 1# liliy 各有优势，infa 8.0 不是很稳定，但8.5 基本上就很好了！ 9.0 还没有用过！infa 模块化的DESIGN, 易用性很强, DS可能在这方面就相对差些

这个问题有三个方向，一是 建立统一的数据平台，做数据的加工整合方便以后展示二是 业务系统的整合三是 如果方便的话，尽量统一使用相同的数据库

回复 2# wanglkwl 前两个图是批处理，前者call后者下图是你说的需要配置日志的地方吗，其他的控件也没配置这个日志呀