1、背景银行业是一个数据密集型行业，也是一个数据驱动的行业，数据一直是银行信息化发展的主题词。而今，在互联网金融时代，伴随着商业银行经营转型的持续深入，各家银行对大数据应用的需求日益多元化，迫切希望借助大数据应用，践行以金融科技赋能业务创新及服务体验升级。建设银行...(more)

随着电信行业信息化速度的加快，不同类型的数据皆呈现出爆发性的增长并质变成大数据。随着海量、细致的新数据源的不断呈现，大数据在运营、策划、营销等方面的应用，得到不同层面的技术指标，产生系列的报表并反馈在生产和运营中，大数据价值的挖掘应用成为智慧企业发展的所迫切需...(more)

两者分别是什么？ApacheHive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言，这种语言最终被转化为Map/Reduce.虽然Hive提供了SQL查询功能，但是Hive不能够进行交互查询–因为它只能够在Haoop上批量的执行Hado...(more)

一、项目建设背景随着大数据、云计算、移动互联迅速发展，快速交付与灵活扩展的强烈需求增长，传统竖井式的IT基础架构设施面临着新的挑战。一方面快速增长的互联网业务需要灵活的、可自由伸缩、不限于规格容量的存储的IT软硬件资源提供坚实基础保障，另一方面高效的业务响应同...(more)

1.基础数据类型2.1数值型类型描述TINYINT1个字节（8位）有符号整数，from-128to127SMALLINT2个字节（16位）有符号整数，from-32,768to32,767INT4个字节（32位）有符号整数,from-2,147,483,648to2,147,483,647BIGINT8个字节（64位）有符号整数,from-9,223,372,036,854,775,808to9,223,372,036...(more)

1.什么是Hbase？HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，目标是存储并处理大型的数据。HBase是GoogleBigtable的开源实现，不同之处在于：GoogleBigtable使用GFS作为其文件存储系统，HBase利用HadoopHDFS作为其文件存储系统；GoogleBigtable利用Chubby作为协...(more)

（1）打印查询头，需要显示设置：sethive.cli.print.header=true;（2）加"--"，其后的都被认为是注释，但CLI不解析注释。带有注释的文件只能通过这种方式执行：hive-fscript_name（3）-e后跟带引号的hive指令或者查询，-S去掉多余的输出：hive-S-e"select*FROMmytableLIMIT3">/tmp/myquery（4）遍历...(more)

nebula-spark-connector-reader本文主要讲述如何利用SparkConnector进行NebulaGraph数据的读取。##SparkConnector简介SparkConnector是一个Spark的数据连接器，可以通过该连接器进行外部数据系统的读写操作，SparkConnector包含两部分，分别是Reader和Writer，而本文侧重介绍Spa...(more)

（1）按页面类型统计pvselectpageType,count(pageType)fromext_trackflowwherestatDate='20140521'groupbypageType;Note：一般SELECT查询会扫描整个表，使用PARTITIONEDBY子句建表，查询就可以利用分区剪枝（inputpruning）的特性Hive当前的实现是，只有分区断言出现在离FROM子句最近的...(more)

Hive的数据模型介绍如下：（1）Hive数据库类似传统数据库的DataBase，在第三方数据库里实际是一张表。简单示例命令行hive>createdatabasetest_database;（2）内部表Hive的内部表与数据库中的Table在概念上是类似。每一个Table在Hive中都有一个相应的目录存储数据。例如一个表pvs，...(more)