注册登录
提 问
English中文版
金融其它etl系统运维

在网络、存储、IO等基础架构层面，可以从哪些方面优化ETL的效率？

在网络、存储、IO等基础架构层面，可以从哪些方面优化ETL的效率？

关注2
评论
参与3

1同行回答
|
按赞同排序
按时间排序

xuyanhuixuyanhui信息分析/架构师58同城大数据
优化部分其实很多场景都有优化点，但是有个问题很明显，ETL独立的部署主机，已经HA相关的设计是很必要的，另外一些运行的任务要采用的方式都需要注意。网络方面的设置与本地磁盘的要求要看场景进行优化...显示全部

优化部分其实很多场景都有优化点，但是有个问题很明显，ETL独立的部署主机，已经HA相关的设计是很必要的，另外一些运行的任务要采用的方式都需要注意。网络方面的设置与本地磁盘的要求要看场景进行优化

收起
互联网服务 · 2015-10-15
浏览1069
评论

提问者

freebile
freebile002
数据库运维工程师金融行业
擅长领域： 数据库，数据库系统改造，关系型数据库
关注33
回答340
评论697

问题来自

  • 活动 - 如何进行大数据平台ETL的架构搭建？

    • 相关问题

  • 适配迁移信创操作系统后各类软件的兼容性问题如何解决？
  • 凭实力讲，运维工程师能不能做到预言家，未卜先知发现问题？
  • 请教个职业发展问题，银行外包运维有前途吗？
  • 传统IDC运维如何过渡到自动化运维？
  • 麒麟操作系统运维常见问题集中提到“/proc/sys/kernel/hung_task_timeout_secs”报错？

    • 相关资料

  • CentOS Troubleshooting案例讲解及Linux运维自动化实践
  • IT基础架构：系统运维实践-001-225
  • 系统运维全面解析 技术、管理与实践-第一部分
  • 信息技术服务+运行维护服务能力成熟度模型-2023征求意见稿
  • IT基础架构：系统运维实践-226-449

    • 相关文章

  • 运维实践：基于频繁项集的告警关联分析系统的研究与实现
  • 招聘 | 华夏银行信息科技部招人，涉开发、运维、安全、数据等（地点：北京）
  • 企业IT运维从“手动”到“自动”再到“智能”
  • 浙商银行总行金融科技2023年度社会招聘启事（地点：杭州）
  • 浙商银行总行2023年度科技运行管理专场社会招聘

    • 问题状态

  • 发布时间：2015-10-15
  • 关注会员：2 人
  • 问题浏览：3982
  • 最近回答：2015-10-15

    • 关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
    © 2024talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30

    X社区推广