企业报表系统如何快速、批量的抽取来源众多的数据同时保证数据质量？ ——Cognos+Datastage解决方案解析 - twt企业IT交流平台 - talkwithtrend，企业IT技术社区，帮助您融入同行！

企业报表系统如何快速、批量的抽取来源众多的数据同时保证数据质量？ ——Cognos+Datastage解决方案解析

: Bangben咨询专家ibm
IBM资深BI解决方案顾问,业务分析解决方案架构师
关注86
个人主页
Ta的精彩回答
请问针对目前的大数据，NOSQL如何做报表？
Cognos目前不直接支持连NOSQL数据库,一般连hadoop可以通过HIVE或impala来连,如果是IBM...1赞同
当数据量比较庞大的时候，如何稳定并高效的刷新CUBE
数据量太大的情况下,建议尝试用Dynamic Cube来做. 1赞同
cognos dynamic cube 雪花模型
1.这里的雪花型是指以各维表分多表存储,如产品维表由产品大类表,产品中类表,产品表三...2赞同
TR如何设置维度，不显示没有度量数据的成员
在TR中设置一下层次属性1赞同
cognos是否适合实时更新的场景？
准实时可以做,但一般需要ETL端配合,如CDC. 实时性要求太高的,如毫秒级暂时还不支持....1赞同
为了处理大量数据，产品提供了什么能力？
对于PB级数据,可以基于IBM大数据平台big insight来做,SQL层有big insight家族中的 big...1赞同
复杂式中国报表
除了表头斜线需要图片来做外,其他基本都可以做.如银行里1104类报表....0赞同
大数据cognos实时展现
Cognos Dynamic cube可以做到准实时分析,如果实时分析要求很高,如毫秒级,则需要使用专...0赞同
Cognos 报表迁移权限问题
可以通过Cognos administration中的内容管理导出/导入功能来实现. 注意,权限导出可以...1赞同
Cognos 移动端性能问题及IBM是否还重视这块内容
你说的应该是基于Cognos Active report做的dashboard. AR报表从10.2.1开始,每个版本都...3赞同
cognos server分页显示内部机制问题
参考上面的回复. 总体来说,10.2之后的版本,推荐使用DQ引擎,如果是OLAP,推荐使用DC(dyn...0赞同
各位同仁谁处理过Cognos用户在Cube内设置数据权限？
请参考附件.0赞同
cognos server分页显示内部机制问题之一
查询只提交一次,但是数据是分页从数据库中拉到Cognos服务器2赞同
cognos server分页显示内部机制问题之二
DQ的话,有结果集缓存,缓存在Cognos服务器磁盘里. 如果是CQ,则没有缓存...0赞同
cognos server分页显示内部机制问题之三
不显示总页数是从性能上优化来考虑的.0赞同
cognos server分页显示内部机制问题之四
Cognos分页报表肯定不会一次性将所有数据查询到Cognos服务器,下一页时才从数据库将数...0赞同
cognos server分页显示内部机制问题之五
Cognos 10开始推出新的查询引擎Dynamic Query (DQ),基于JDBC连接,是一种优化的查询引...0赞同
Cognos 新版本中Query Studio 是否有优化
Query Studio是Cognos 8中遗留的功能,在新版本Cognos11中推荐使用Reporting,如果是cog...0赞同
Cognos11安装配置完以后无法访问欢迎页面。
Cognos11 安装增加了自动安装配置功能,如果选择自定义安装,跟Cognos 10没有差别.无法...0赞同
Cognos 新版本服务配置要求
1. Cognos 11支持windows server 20122. Cognos服务器并不是越大越好,只要足够就可以....2赞同
工作中遇到的问题，希望专家最好能归纳一下都有什么原因会出现这种情况
检查一下cube更新的日志2赞同
这个问题是由于数据没有加载到cube中造成的,从两个方面来看:1.Fact表中是否有数据;2.F...2赞同
Cognos分页合页问题
可以通过conditional block来实现.0赞同

: daniel0623it技术咨询顾问IBM
IBM Analytics软件售前工程师
关注15
个人主页
Ta的精彩回答
datastage spark 对接
DS与Spark无接口，两者是类似的数据处理引擎。0赞同
数据实时问题
分情况了，看你的数据源是结构化的数据库还是非结构化的数据源。如果是结构化的数据源，可...2赞同
datastage集群下如何避免因某节点died引起的作业报错问题
不是配置问题，是并发太高服务器资源扛不住导致的。DS是进程级应用，一个作业启动的进程很...1赞同
请问，实际应用场景中，如何来验证数据量众多的数据质量？
Information Analyzer也是Information Server的一个组件，它内置了一部分数据质量校验规...1赞同
项目前期就要考虑数据质量的问题，利用数据质量分析工具如Information Analyzer，获取数据...2赞同
DS的升级迁移问题
他的意思应该是不能做原地升级，原地升级因为涉及到WAS中间件的升级，版本跨度较大，难度也...2赞同
不会啊，DataStage支持跳版本升级，有客户直接从8.1升到11.3的。一般升级DS建议导出Job，卸...0赞同
列式表与datastage
数据库管理员怎么说？从数据库日志能看到什么问题？DS+DB2的客户很多，从没听过这个问题，最好...0赞同
Datastage11.5安装性能问题
nmon监控系统性能，排查IO，内存，网络，CPU等问题。0赞同

: cuicuitiger软件架构设计师龙江银行股份有限公司
2009年开始从事银行BI项目开发，熟悉BI、Planning、数据仓库类项目全过程，拥有PMP、系统分析师、信息系统项目管理师、软件设计师等多项认证，原I...
关注15
个人主页
Ta的精彩回答
cognos多维cube问题
将Cube按日期进行分区，会依据日期分成若干个小.mdc文件0赞同
尽可能的实时刷新数据场景的应用分享
如果是涉及到ETL处理的话，暂时做不到实时刷新，尤其是数据分析类应用，都需要一个数据处理...0赞同
当数据量比较庞大的时候，如何稳定并高效的刷新CUBE
可以按日期将Cube分区，Cognos会依据数据日期将Cube分成若干小文件，在Tr建模的时候可以选...2赞同
cognos是否适合实时更新的场景？
Cognos一般用于BI项目，数据都需要一定时间处理，比如日批量生成Cube。如果是直接连接数据...0赞同
请问，实际应用场景中，如何来验证数据量众多的数据质量？
ETL阶段进行数据验证，有专门的验证工具也可以自己写DQ脚本，验证逻辑可以是针对数据条数，...1赞同
Cognos11安装配置完以后无法访问欢迎页面。
Windows服务器下安装还是Linux服务器下安装？0赞同
工作中遇到的问题，希望专家最好能归纳一下都有什么原因会出现这种情况
TR里面事实表和维表关联的字段名字一样吗？0赞同
Cognos 报表自动刷新
看你的报表是什么数据源，Cube的需要刷新Cube才行，直连数据源的可以做“动态报表”实现刷...2赞同

: anda其它vipabc
关注25
个人主页
Ta的精彩回答
数据实时问题
每个部门都想要可以有时时数据，也不是说做不到。只是有对应的Cost还是需要具体了解用户...0赞同
当数据量比较庞大的时候，如何稳定并高效的刷新CUBE
有必要就是切cube使用0赞同
schedule job突然停了，重启服务又好了，怎么回事？
有看log吗？不运行应该也会有stop service的记录0赞同
复杂式中国报表
其实还是可以做的到的就看如何加工0赞同
Cognos 报表权限维护问题
有第三方工具可以使用，进阶功能要收费的0赞同
假如业务系统，有些属性没维护好怎么处理？
要解决问题就要一次到位，前端系统的问题。后端再多的判断条件都无法满足不断变更的规则...1赞同
Cognos 新版本服务配置要求
#2 大哉问，也想了解下0赞同
工作中遇到的问题，希望专家最好能归纳一下都有什么原因会出现这种情况
还是看Log ，才能知道具体问题0赞同

: yogman00软件开发工程师ccvc
关注0
个人主页
Ta的精彩回答
DS的升级迁移问题
8.5升级11版本，JOB导出，卸载重装最方便，但是有一点需要注意就是11版本的Oracle connectio...0赞同

在本场活动提问

活动明星榜

咨询专家ibm

本场活动获赞 19

it技术咨询顾问IBM

本场活动获赞 8

软件架构设计师龙江银行股份有限公司

本场活动获赞 5

项目经理渤海财险

本场活动获赞 3

白帝舞剑行003

IT顾问IBM

本场活动获赞 3

软件开发工程师top

本场活动获赞 2

sunquan007_2001

软件开发工程师咔咔

本场活动获赞 2

软件架构设计师xxx公司

本场活动获赞 2

项目经理杭州

本场活动获赞 2

商业智能工程师中国太平洋保险

本场活动获赞 1

关于TWT 使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
© 2024talkwithtrend — talk with trend,talk with technologist 京ICP备09031017号-30

X社区推广