注册登录
提 问
English中文版
生活生产服务其它etl商业智能cognos数据质量

请问，实际应用场景中，如何来验证数据量众多的数据质量？

都通过哪些环节来把控，确保数据质量？能否具体讲讲，什么方面的设计，或者流程，以及小细节是为了质量而存在的？

关注3
评论
参与13

4同行回答
|
按赞同排序
按时间排序

cuicuitigercuicuitiger软件架构设计师龙江银行股份有限公司
ETL阶段进行数据验证，有专门的验证工具也可以自己写DQ脚本，验证逻辑可以是针对数据条数，金额等，具体就要看你最后要分析的数据，数据质量问题可能是ETL数据处理时候的问题也可能是数据源的问题。...显示全部

ETL阶段进行数据验证，有专门的验证工具也可以自己写DQ脚本，验证逻辑可以是针对数据条数，金额等，具体就要看你最后要分析的数据，数据质量问题可能是ETL数据处理时候的问题也可能是数据源的问题。

收起
银行 · 2016-10-28
浏览1192
查看赞同的人
评论1
  • amu0722  amu0722
    DQ脚本是什么，还有我这边用的kettle跟 存储过程写的etl过程，如果中间加入自动校验功能的话有木有什么思路或者设计方式提点一下？
    2016-10-28
    赞同
    评论

提问者

amu0722
amu0722001
CEO打毛党
擅长领域： 大数据，商业智能，数据库
关注48
回答252
评论356

问题来自

  • 活动 - 企业报表系统如何快速、批量的抽取来源众多的数据同时保证数据质量？ ——Cognos+Datastage解决方案解析

    • 相关问题

  • 如何保障模型训练数据质量？
  • cognos , 一个多维模型，如何实现 历史数据按年或者季度分区，最近一个季度按月分区？
  • cognos cube可以自动批量刷新数据权限吗？
  • cognos11.1.7访问如下地址http:// ip:9300/; admin之后会不停访问，是否可以设置禁止访问？
  • 通过浏览器访问报表url,但只跳转到cognos主页，并未打开报表，如何解决？

    • 相关资料

  • Quick BI产品白皮书2022
  • 网易有数 BI 体系的建设和实践
  • 实时ETL工具-StreamSets操作手册
  • Oracle+Service+Bus安装、配置、操作详解

    • 相关文章

  • 9大影响ETL数据传输性能的核心因素
  • 运用ETLCloud快速实现数据清洗、转换

    • 问题状态

  • 发布时间：2016-10-28
  • 关注会员：3 人
  • 问题浏览：5029
  • 最近回答：2016-10-28

    • 关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
    © 2024talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30

    X社区推广