注册登录
提 问
Db2Oracle数据库迁移Hadoop大数据平台产品选型

DB2/ORACLE数据迁移至大数据平台数据库（如hadoop）有何经验或者步骤？

上面的问题可能是今后很有可能遇到的问题，以前OLAP型数据库可能跑在了DB2或者ORACLE上，但OLAP目前来说可能随着数据量越来越大，并发越来越高，可能DB2或者ORACLE某些方面并不能胜任，再加上现在分布式数据库、分布式应用如火如荼，那么如果真要进行数据库数据迁移，由DB2/ORACLE迁移至大数据平台数据库，有哪些方法或工具可供选择？迁移过程中需要注意的点有哪些？

关注6
评论

4回答
按赞同排序
按时间排序

冯帅冯帅  数据库管理员 , 贝壳金服
qysong、半夏蒲公英、tiehx等赞同了此回答
通过使用MapReduce的方式，使Hadoop可以直接访问Oracle，并将相关的数据写入到HDFS文件当中。 从而可以顺利地将Oracle中的数据迁移到Hadoop文件系统中。显示全部

通过使用MapReduce的方式，使Hadoop可以直接访问Oracle，并将相关的数据写入到HDFS文件当中。 从而可以顺利地将Oracle中的数据迁移到Hadoop文件系统中。

收起
　2017-04-21
浏览7322
查看赞同的人
评论
bendshabendsha  系统架构师 , 上海爱数信息技术股份有限公司
qysong、tiehx、jxnxsdengyu赞同了此回答
不求无缝迁移的话，这些工具也够用了，测试发现：DataX效率是最高的，Sqoop次之，Kettle再次之，但Kettle有个优点，有强大的图形操作界面，对于习惯图形化操作的管理员来说，操作起来是最方便的。...显示全部

不求无缝迁移的话，这些工具也够用了，测试发现：DataX效率是最高的，Sqoop次之，Kettle再次之，但Kettle有个优点，有强大的图形操作界面，对于习惯图形化操作的管理员来说，操作起来是最方便的。

收起
　2017-04-24
浏览7235
查看赞同的人
评论
bigdata_userbigdata_user  软件开发工程师 , 博彦科技
qysong、tiehx、jxnxsdengyu赞同了此回答
之前使用的sqoop可以用下，直接将数据导入到hdfs和hive，在hive中创建数据库中对应的database和table,可以尝试下kettle,这个没用过，不够听说挺好的，比较好控制显示全部

之前使用的sqoop可以用下，直接将数据导入到hdfs和hive，在hive中创建数据库中对应的database和table,

可以尝试下kettle,这个没用过，不够听说挺好的，比较好控制

收起
　2017-04-22
浏览7182
查看赞同的人
评论
美国队长美国队长  研发工程师 , Alibaba
qysong、jxnxsdengyu、aixkevin赞同了此回答
网上直接搜阿里开源同步框架Datax，同步的神器，呵呵显示全部

网上直接搜阿里开源同步框架Datax，同步的神器，呵呵

收起
　2017-04-21
浏览7089
查看赞同的人
评论

提问者

jxnxsdengyu
jxnxsdengyu1618
系统工程师江西农信
擅长领域： 存储，灾备，双活
关注1008
回答1076
评论1466

问题来自

  • 活动 - 不同数据库之间的数据迁移方案设计及迁移工具选择
  • 活动 - 运营商网络数据分析综合平台传统数据库如何切换到Hadoop？

    • 相关问题

  • 一个表最多可以创建多少个分区？有限制吗？
  • 应用级灾备架构如何设计性价比更好？另外在选型方面有什么建议？
  • 各位DBA大牛们，银行业务系统中用得较多的数据库是啥？
  • 金融行业交易类应用的数据库从Oracle迁移至信创数据库是否有较为成熟的实践路径？
  • 在一个高并发、大数据量的业务环境中，你会选用oracle还是mysql？

    • 相关资料

  • 数据库运维中个人经验总结分享（共800多页，1300多个笔记）
  • ORACLE 高可用性（RAC） 技术解决方案及实现过程
  • 华泰证券大数据平台实践以及应用探讨
  • 某银行跨数据中心的数据库双活及灾备建设经验分享
  • ORACLE数据库维护

    • 相关文章

  • 以优雅的方式对oracle分区表进行分区拆分操作
  • 湖南三湘银行股份有限公司招聘大数据平台运维工程师、云计算平台运维工程师等岗位 地域：长沙
  • Oracle数据库日常巡检指令
  • 企业国产数据库应用实践问题及难点剖析总结
  • 大数据平台技术选型及架构设计

    • 问题状态

  • 发布时间：2017-04-21
  • 关注会员：6 人
  • 问题浏览：14011
  • 最近回答：2017-04-24

    • 关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们
    © 2023talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30

    X社区推广