开展本次性能调优原因是发现我们目前有些OLAP的分析查询，数据流是从Hive-->oracle回环。为什么会有这种回环链路依赖，大家都说是Impala有不少查询很不稳定，性能低，可能是资源不足造成。所以又把Hive的数据再反向导回oracle。真相究竟如何？我们来找找。借用clouderaManager，...(more)

作者|TCeason青云科技数据库研发工程师2000年至今，MySQL[1]一直是全球最受欢迎的OLTP（联机事务处理）数据库，ClickHouse[2]则是近年来受到高度关注的OLAP（联机分析处理）数据库。那么二者之间是否会碰撞出什么火花呢？本文将带领大家打破异构数据库壁垒，将MySQL数据同步至ClickHouse...(more)

引言：随着信息技术呈现井喷式发展，尤其以数字经济为代表的IT新基建将成为新经济的发展动能。同时以云计算、大数据、人工智能、区块链等为代表的数字技术不断涌现，快速向各领域进行融合渗透。在技术导向更为明显的今天，以数据为核心的数字化转型已是大势所趋。在笔者所在的金...(more)

一、通过playbook安装与设置zookeeper---#必须字段，类同于#/bin/bash-hosts:test#远程操作主机remote_user:cedar#远程操作用户become:yes#是否sudotasks:-name:"安装zookeeper"#任务命名command:yum-yinstallmesosphere-zookeeper#远程执行命令安装zook-name:"启动zookee...(more)

1、背景银行业是一个数据密集型行业，也是一个数据驱动的行业，数据一直是银行信息化发展的主题词。而今，在互联网金融时代，伴随着商业银行经营转型的持续深入，各家银行对大数据应用的需求日益多元化，迫切希望借助大数据应用，践行以金融科技赋能业务创新及服务体验升级。建设银行...(more)

前言随着企业拥抱数字化程度的提高，数据是企业的发展关键。数据的需求来源于业务也服务于业务，数据的挖掘、探索、分析、个性化推荐、报表等等都依托于数据的输送、转换和写入。数据的调度就是作业的调度。批量作业调度是金融行业信息后台最为重要的技术形态。金融行业每天...(more)

分布式批量任务调度、自动化运维管理监控平台Taskctl前言随着企业拥抱数字化程度的提高，数据是企业的发展关键。数据的需求来源于业务也服务于业务，数据的挖掘、探索、分析、个性化推荐、报表等等都依托于数据的输送、转换和写入。数据的调度就是作业的调度。批量作业调度...(more)

TASKCTL在线应用简介：‍Taskctl在线应用版V1.2相比C/S应用端功能完整，并精简部分操作逻辑，适合初学者体验taskctl产品，也能作为中小项目生产应用。软件安装:《TASKCTL在线应用free版的特性、权限、注册说明》关注公众号:【taskctl】回复内容>"领取">或>"软件">即...(more)

ETL是数据仓库中的非常重要的一环，是承前启后的必要的一步。ETL负责将分布的、异构数据源中的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转换、集成，最后加载到数据仓库或数据集市中，成为联机分析处理、数据挖掘的基础。下面给大家介绍一下什么是ETL以及E...(more)

RedisRedis（RemoteDictionaryServer)，即远程字典服务，是一个开源的使用ANSIC语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。Redis的作者，叫SalvatoreSanfilippo，来自意大利的西西里岛，居住在卡塔尼亚。Redis的特点ü  内存数据库，...(more)