软件开发hbasehdfs数据

查看其它 7 个回答百分点的回答

百分点百分点技术总监百分点
回复 8# han11jiji


   一般来说我们是将非结构化数据转换为结构化的再导入到HBase中,百分点有一个产品Formatter完成这项工作,它读取JSON数据,然后:1. 将JSON记录中的每个字段清洗为Hive或HBase接受的类型
2. 将所有记录拼接为一条或几条记录,这是看JSON中是否有嵌套字段(数组、Map)决定的
3. 将拼接出的记录导入到指定的Hive表或HBase中
这个产品通过配置即可完成上述操作,不需要写代码。
互联网服务 · 2015-07-04
浏览1873

回答者

百分点
技术总监百分点
擅长领域: 大数据大数据平台数据库

百分点 最近回答过的问题

回答状态

  • 发布时间:2015-07-04
  • 关注会员:0 人
  • 回答浏览:1873
  • X社区推广