银行夜间日终结算区间内批量业务大，IT系统计算资源和存储I/O能力如何应对？ - twt企业IT交流平台 - talkwithtrend，企业IT技术社区，帮助您融入同行！

银行夜间日终结算区间内批量业务大，IT系统计算资源和存储I/O能力如何应对？

: hanfei000系统架构师某城商行
关注1
个人主页
Ta的精彩回答
日终结算对存储的IO类型是什么
写操作多一些，读操作可用数据库工具优化0赞同
如何评价一台存储的功耗，是否节能?
pue亦可应用于计算存储功效0赞同
银行夜间日终结算区间内批量业务大，最常出现的问题有哪些？
批处理过程中会有大量的数据库操作和磁盘读写。首先，应用程序的查询－删除－插入－修改等一系...0赞同
银行夜间日终结算区间内批量业务，大家都采用的主机和存储？
power、hp＋san0赞同
存储的I/O吞吐能力等不均衡或能力弱产生的瓶颈，如何解决？
提高应用程序的可用性比盲目加硬件效果更好0赞同
核心配置DG后，若primary端使用全闪存，standby端可否用传统存储
双节点最好使用同类型、同配置、同设置的硬件，那怕配置低一些。否则出问题很难定位，也很...2赞同
要从哪些方面、利用哪些工具来分析问题和缩短跑批时长？
主要是从应用优化方面，其次通过系统命令topas、iostat、vmstat等查看系资源，最后使用存...3赞同
是否这类任务的处理cpu计算资源更容易成为瓶颈，而不是存储io？
如果有大量读写等磁盘操作，那就是cpu在等io0赞同
同等环境下，对日终等跑批任务的效率方面是否也有显著提升？
中小银行一般情况下服务器和存储硬件设备不存在瓶颈。传统做法是os与data分开，安全性、...0赞同
跑批程序的调度和逻辑关系纷繁复杂，如何应对？
最好通过优化应用、提升数据库执行效率方面考虑，加硬件饮鸩止渴。当然，如果硬件资源太低...3赞同
如何判断日终结算的性能瓶颈位于服务器还是存储上
系统层面topas，存储通过管理工具，不同的存储工具不同0赞同

: zp_ccc高级技术主管国内某金融科技公司
关注655
个人主页
Ta的精彩回答
日终结算对存储的IO类型是什么
银行的交易类业务还是以随机读写I/O为主。0赞同
如何评价一台存储的功耗，是否节能?
每一台设备都有额定功率和实际功率，可以通过监测实际攻略计算设备的功耗。...0赞同
银行夜间日终结算区间内批量业务，大家都采用的主机和存储？
目前还是运用银行的核心业务主机和核心存储来做夜间批处理业务。例如IBM power 服务器...0赞同
存储的I/O吞吐能力等不均衡或能力弱产生的瓶颈，如何解决？
主机的计算资源如果需要应对突发情况，可以通过动态调整计算资源的方式增加计算资源，前提...0赞同
传统存储架构应对大数据分析场景？
OLAP场景需要的是更多的读的性能，并且是大量的随机读。传统集中式机械硬盘存储，比较难在...2赞同
日终跑批期间，如何能快速准确的监控到计算资源和io的峰值，以便后续调整？
例如AIX系统可以通过nmon分析0赞同
核心配置DG后，若primary端使用全闪存，standby端可否用传统存储
可以通过ASM_PREFERRED_READ_FAILURE_GROUPS设置主存储优先读。3赞同
批量作业中如何解决对数据库锁表等问题？
锁是为了保证数据一致性0赞同

: 陈宇系统工程师某银行
关注285
个人主页
Ta的精彩回答
夜间日终结算区间内批量业务大，用传统存储好，还是闪存好？
如预算充足，建议使用闪存，提升日终结算的速度。0赞同
请问如果使用闪存，闪存的可靠性问题如何保证？稳定性较传统存储如何？
需要纠正一个误区，闪存可靠性实际上是比机械硬盘更好的。因为闪存没有类似机械硬盘磁头...0赞同
针对存储架构为svc＋双存储镜像的架构，一存储使用闪存，另一存储需求如何？
由于写入操作需两台存储都完成，才算完成，因此对备存储也有一定的性能要求，建议不要比主存...0赞同
如何缩短批量处理时间
使用闪存存储替代原有存储，提升存储性能0赞同
如何灵活运用分级存储
购买带有自动分层功能的存储即可，由存储自身来决定数据存放位置...0赞同
如何处理日终跑批时计算资源与io资源的分配问题
如果是小型机，夜间计算能力需求较高，可使用PowerVM虚拟化技术，动态调配CPU资源，也可考虑CU...0赞同
存储的性价比问题
考虑使用存储分层功能、压缩功能0赞同
闪存如何跟传统存储相结合
可以考虑在传统存储上添加SAS接口的固态盘，将一部分读写频繁的数据迁移到固态盘上，实现...0赞同
是否这类任务的处理cpu计算资源更容易成为瓶颈，而不是存储io？
视业务逻辑，有些业务消耗CPU，有些消耗存储资源0赞同
如何降低全闪存存储单位容量的成本
没人回，自己顶一下……0赞同
目前其他同业在跑批用的硬件资源情况，是否有新技术应对?
一般来看跑批的时候系统的负载会比白天高一些，除了优化程序逻辑提高效率以外，可以通过升...0赞同
如何优化结算批处理架构和流程？
这个需根据业务逻辑对程序代码进行优化，具体问题具体分析。...0赞同
关于更换存储解决跑批慢的问题
定位跑批慢的瓶颈点，请参考本次交流活动其他人提出的类似问题。存储迁移，如果有部署SVC，...0赞同
对于日终结算以及特殊时点的，采用何种架构能有效应对资源不足？
可以使用PowerVM技术动态分配CPU资源0赞同
批量作业中如何解决对数据库锁表等问题？
只能改程序，优化程序逻辑。0赞同
资源指的是物理资源，比如服务器内存等？
还有CPU资源，存储资源（包括存储能提供的速度和容量）0赞同

在本场活动提问

活动明星榜

haizdl101634

技术经理大连

本场活动获赞 12

技术经理海通证券股份有限公司

本场活动获赞 10

系统架构师某城商行

本场活动获赞 8

高级技术主管国内某金融科技公司

本场活动获赞 5

系统工程师RCCU

本场活动获赞 2

技术支持某乡社

本场活动获赞 1

关于TWT 使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
© 2024talkwithtrend — talk with trend,talk with technologist 京ICP备09031017号-30

X社区推广