周光明

周光明

擅长数据库架构及数据分析。

动态

实时数仓 周光明周光明 赞同了回答 2019-09-04

不同实时性(如完全实时性、秒级实时性等)如何采用不同技术?

jamiee jamiee 数据库架构师,某股份制银行
我们曾经做过一个风控类的项目,大概在几十毫秒完成指标计算,并将指标反馈给实时决策引擎。思路有两个。一是业务系统将交易报文下发给实时指标加工模块进行处理,指标加工模块完成指标计算后同步返回加工结果;另一个是上游查看全文
模型设计 数据仓库 实时数仓 周光明周光明 回答了问题 2019-09-04

传统数据仓库与大数据平台的准实时仓库,在模型设计上会有什么差异?

周光明 周光明 软件架构设计师,People's Bank of China
谈点个人理解:1)一般业务系统或者一般应用系统:对于一般业务系统或者一般应用系统之上补充增加一些实时分析或者实时监控,这个模型建立与业务系统/应用系统耦合比较紧密,这样的模型建立的五花八门,没有统一、更没有标准。查看全文
应用场景 技术架构 实时数仓 周光明周光明 赞同了回答 2019-09-04

准实时数仓的采用的技术架构,场景及落地情况?

gengyang gengyang 数据仓库工程师,民生银行
这个问题比较大,现在很多银行包括互联网公司也都是在探索阶段。 关于背景其实没必要多说什么,现在对多种场景对数据的时效性要求都越来越高,从系统监控到实时营销,从内部管理到监管报送等诸多场景都要求建设实时数仓。查看全文
数据建模 数据仓库 实时数仓 周光明周光明 回答了问题 2019-09-03

实时数据仓库与传统数据仓库的融合:实时数据仓库与历史数据仓库是否考虑统一建模还是分开建模?

周光明 周光明 软件架构设计师,People's Bank of China
1)无论实时数据仓库还是历史数据仓库,感觉建立模型是非常关键的,以模型为中心,以模型为驱动。数据分析本质上还是模型+算法。2)实时数据仓库与历史数据仓库,在数据采集技术和数据传播技术等技术实现会有较大差别,但是模型上查看全文
历史数据 实时数据 数据仓库 周光明周光明 赞同了回答 2019-09-03

如何把控实时数据仓库的实时数据的粒度与历史数据仓库的历史数据的粒度?

jamiee jamiee 数据库架构师,某股份制银行
实时数仓的数据粒度应该要跟技术实现有关,我理解有起码有两类实现方式,一类存储指标等汇总数据,另一类是存储清洗后原始数据:1.一类是基于根据实时采集的数据,在历史存储的指标基础上行加工新的指标值。这种实现方式是没有查看全文
实时数仓 周光明周光明 发布了问题2019-08-29

实时数据仓库性能方面如何考虑?

周光明 周光明 软件架构设计师,People's Bank of China
浏览742
回答1
实时数仓 周光明周光明 发布了问题2019-08-29

不同实时性如何采用不同技术?

周光明 周光明 软件架构设计师,People's Bank of China
浏览1002
回答2

擅长领域

Db2 Db2
cognos cognos
报表 报表

最近来访

  • 冯岩