Hive在数据逻辑处理中如何利用自定义函数?

Hive在数据逻辑处理中如何利用自定义函数?

参与10

2同行回答

bigdata_userbigdata_user软件开发工程师博彦科技
UDF、UDAF和UDTF,一般UDF比较常用使用的时候需要将数据集转换为spark dataframe显示全部

UDF、UDAF和UDTF,一般UDF比较常用

使用的时候需要将数据集转换为spark dataframe

收起
互联网服务 · 2017-07-04
浏览1982
美国队长美国队长研发工程师Alibaba
自定义函数用在对表中某些字段进行逻辑上的简单处理,根据不用的添加方式,使用方式也有所不同,如果利用java编写自定义函数达成jar形式,可以每次在写sql脚本的时候利用add jar这个命令手动添加jar,也可以通过在hive-site.xml中配置hive.aux.jars.path指定到具体jar文件的路径,这...显示全部

自定义函数用在对表中某些字段进行逻辑上的简单处理,根据不用的添加方式,使用方式也有所不同,如果利用java编写自定义函数达成jar形式,可以每次在写sql脚本的时候利用add jar这个命令手动添加jar,也可以通过在hive-site.xml中配置hive.aux.jars.path指定到具体jar文件的路径,这样hive启动的时候就会自动加载jar,另外再${hive_home}下创建auxlib,把jar拷贝其中

收起
互联网服务 · 2017-07-04
浏览1936

提问者

时东南
软件架构师外资银行
擅长领域: 人工智能大数据机器学习

问题来自

相关问题

相关资料

问题状态

  • 发布时间:2017-07-03
  • 关注会员:4 人
  • 问题浏览:4707
  • 最近回答:2017-07-04
  • X社区推广