本文将简要介绍Spark机器学习库（SparkMLlib’sAPIs）的各种机器学习算法，主要包括：统计算法、分类算法、聚类算法和协同过滤算法，以及各种算法的应用。你不是一个数据科学家。“根据科技和商业媒体报道，机器学习将防止全球变暖”，显然只有中国的新闻媒体才会发布类似的虚假新闻，可...(more)

1.问题描述大家现在可能都知道，目前帆软旗下特色产品主要是FineReport和FineBI，但是部分用户可能会有个疑问：FineReport和FineBI到底有什么区别？2.产品介绍FineReport和FineBI作为两种分析工具，最终的结果可以放在一个信息门户上（op=fs、移动门户上）主要差别：1、数据处理——Fine...(more)

ApacheSpark的高性能一定程度上取决于它采用的异步并发模型（这里指server/driver端采用的模型），这与Hadoop2.0（包括YARN和MapReduce）是一致的。Hadoop2.0自己实现了类似Actor的异步并发模型，实现方式是epoll+状态机，而ApacheSpark则直接采用了开源软件Akka，该软件实现了Actor模型...(more)

问题描述填报预览时，我们想获取到某个控件的值相对来说较容易。但如果控件是扩展的，就只能获取到第一个值，无法根据扩展一行行获取对应的值。例：本意是想获取到袁成洁，结果还是获取到第一个单元格值孙林。1.png解决方法我们可以通过js事件来获取对应行控件的值。示例新建一个...(more)

来源：VicLiuwww.cnblogs.com/ljhdo/p/5019837.html在MongoDB中，有两种方式计算聚合：Pipeline和MapReduce。Pipeline查询速度快于MapReduce，但是MapReduce的强大之处在于能够在多台Server上并行执行复杂的聚合逻辑。MongoDB不允许Pipeline的单个聚合操作占用过多的系统内存，如...(more)

本文选自《交易技术前沿》第二十四期（2016年9月）。黄寅飞上交所技术有限责任公司，技术开发总部Email：yfhuang@sse.com.cn摘要：本文基于ElasticSearch软件，对运维日志进行大数据分析，以发现运维问题改进运维过程。对构成ELK软件栈的数据采集、数据存储、数据分析与展现技术做介绍...(more)

Common一组由分布式文件系统和通用I/O的组件与接口(序列化,JavaRPC,持久化数据结构)。Avro一种支持高效、跨语言的RPC以及永久化存储数据的序列化系统。MapReduce分布式数据处理模型和执行环境，运行于大型的商用机集群。HDFS分布式文件系统，运行于大型的商用机集群。Pig一...(more)

发个牢骚，搞大数据的也得建设数据仓库吧。而且不管是传统行业还是现在的互联网公司，都需要对数据仓库有一定的重视，而不是谈一句自己是搞大数据的就很厉害了。数据仓库更多代表的是一种对数据的管理和使用的方式，它是一整套包括了etl、调度、建模在内的完整的理论体系。现在...(more)

提起“大数据”就不得不提起有关数据的处理，虽然有人说过大数据在数据质量方面的要求不比传统数据的要求那么严格，当然这也是分场景的断言，但是无论何时数据处理在大数据的生态中始终处于不可缺少的地位，因为数据处理的时效性行，准确性直接影响数据的分析与挖掘，分析的最终结果...(more)

一.概述在有些报表需求中，需要为控件添加倒计时功能，限制到某一个时间点后能进行一项操作或不能进行某项操作，比如查询，导出功能等等，又需要人性化地显示还有多少时间，即倒计时功能，比如下图中我们限制这个报表在每天10点后才能查询1.gif当倒计时结束的时候，查询功能可用2.gif这...(more)