批量文件传输适用的场景范围?

目前我行已建有数据交换系统,用于批处理过程中跨系统的批量文件传输。

存在疑问:

  1. 目前该系统仅用于对批处理过程中批量文件的传输,对于联机交易中的文件传输仍采用FTP方式,是否会将联机交易中的文件传输也纳入统一文件传输平台的适用范围,联机交易中的文件传输与批量数据传输是否有较大差异?
  2. 除传统的批量数据文件外,目前大数据处理过程中使用的流数据传输方式,与文件传输平台的关系是什么,是否也需要纳入一并考虑。
参与6

1同行回答

ibmtest1234ibmtest1234软件开发工程师ibm
原则上只要是文件传输都可以纳入统一文件传输平台,但需要注意的是联机交易对时间的敏感度比批量更高。一般批量关注很多文件在某个时间窗口内传输完成即可,而联机往往要求单笔传输的及时响应。所以纳入一个平台要关注批量是否会影响联机,如果不影响就可以纳入。目前商用的批...显示全部
  1. 原则上只要是文件传输都可以纳入统一文件传输平台,但需要注意的是联机交易对时间的敏感度比批量更高。一般批量关注很多文件在某个时间窗口内传输完成即可,而联机往往要求单笔传输的及时响应。所以纳入一个平台要关注批量是否会影响联机,如果不影响就可以纳入。
  2. 目前商用的批量传输都要求文件落地。IBM Sterling Connect:Direct(C:D)目前已经与AWS做了融合可以直接从AWS下载或向AWS上传数据,如果是与本地的大数据融合需要在C:D基础上做定制。如果不做定制的实现方式是C:D先读取文件把文件传到大数据可以访问到的机器,然后C:D主动调用大数据的接口把文件放入大数据平台。
收起
软件开发 · 2018-09-13
浏览1714
  • 如果是关注响应时间的联机交易中的文件传输,一般采用什么方式进行文件传输?或者是将统一文件传输平台再部署一套,单独用于联机交易?
    2018-09-13
  • 如果是对响应时间要求高的都不采用文件传输,而是通过socket, mq等方式。一般传统的ESB或MQ等负责联机交易,而文件传输平台是另外一套,主要负责批量。但目前确实是联机交易中有文件传输,基本都是2s到5s之间就行,而且即便超了这个时间也没事,那可以用同一套文件传输平台,前提是管理平台不对传输产生影响,传输发生在两个点之间。但如果真是一定要在2s之内响应的我个人不建议用文件。
    2018-09-13

提问者

wswing
系统架构师厦门银行

问题来自

相关问题

问题状态

  • 发布时间:2018-09-13
  • 关注会员:2 人
  • 问题浏览:2441
  • 最近回答:2018-09-13
  • X社区推广