大数据处理
大数据处理
大数据处理大致可分为四步:采集,导入/预处理,统计/分析,挖掘
大数据处理大致可分为四步:采集,导入/预处理,统计/分析,挖掘

文章

spark streaming·2017-09-25
sparker · 腾讯 擅长领域:大数据, 大数据分析, 大数据处理
7 会员关注
作者:潘国庆--1、前言随着互联网技术的迅速发展,用户对于数据处理的时效性、准确性与稳定性要求越来越高,如何构建一个稳定易用并提供齐备的监控与预警功能的实时计算平台也成了很多公司一个很大的挑战。自2015年携程实时计算平台搭建以来,经过两年多不断的技术演进,目前实时...(more)
浏览1483
大数据·2017-09-25
哈杜普 · 百度 擅长领域:大数据, 大数据处理, 数据库
30 会员关注
文章梳理了学习大数据挖掘分析的思路与步骤,给大家提供一些参考,希望能够对你有所帮助。最近有很多人咨询,想学习大数据,但不知道怎么入手,从哪里开始学习,需要学习哪些东西?对于一个初学者,学习大数据挖掘分析的思路逻辑是什么?本文就梳理了如何从0开始学习大数据挖掘分析,学习的...(more)
浏览4302
人工智能·2017-09-18
时东南 · 外资银行 擅长领域:人工智能, 大数据, 机器学习
369 会员关注
本文作者:陈晨,王晓俊,徐轶人东吴在线(苏州)金融科技服务有限公司--摘要人工智能作为金融科技的一个重要分支,在金融投资领域能起到什么样的作用?本文将从金融投资的业务出发,结合国内外相关业务研究,来谈一谈人工智能在国内金融投资领域的应用和发展。1引言因技术变革而至的金融...(more)
浏览2673
评论1
spark·2017-08-23
时东南 · 外资银行 擅长领域:人工智能, 大数据, 机器学习
369 会员关注
摘要十档行情指某只股票或者证券在某一时刻全市场的最低的十个卖出价格和最高的十个买入价格,每一个价格称之为一个档位。上海证券交易所市场监察部在进行数据协查和异常分析中需频繁使用个股任意时点的十档行情信息。临时还原档位行情数据的效率不高。因此,本文致力于基于...(more)
浏览2833
监控·2017-08-23
阿童木 · 某移动 擅长领域:服务器, 大数据, 人工智能
39 会员关注
摘要SparkStreaming是一套优秀的实时计算框架。其良好的可扩展性、高吞吐量以及容错机制能够满足我们很多的场景应用。本篇介绍我们在使用SparkStreaming方面的技术架构,并着重讲解SparkStreaming两种计算模型,无状态和状态计算模型以及该两种模型的注意事项;接着介绍了Spar...(more)
浏览1415
spark·2017-08-18
时东南 · 外资银行 擅长领域:人工智能, 大数据, 机器学习
369 会员关注
1概述2015年以来,随着股市的持续火爆,中国证监会、证券业协会先后发布相关文件,要求对证券公司外部信息系统接入风险加强行业监管和自律。其中要求证券公司应当建立投资者证券、资金账户风险监测模型,动态监测账户交易行为特征、客户交易终端定位信息、账户资金进出等情况,及...(more)
浏览12839
评论1
Flink·2017-08-18
哈杜普 · 百度 擅长领域:大数据, 大数据处理, 数据库
30 会员关注
1.jpg前言说起大数据处理,一切都起源于Google公司的经典论文:《MapReduce:SimpliedDataProcessingonLargeClusters》。在当时(2000年左右),由于网页数量急剧增加,Google公司内部平时要编写很多的程序来处理大量的原始数据:爬虫爬到的网页、网页请求日志;计算各种类型的派生数据:倒...(more)
浏览7833
数据采集·2017-08-15
时东南 · 外资银行 擅长领域:人工智能, 大数据, 机器学习
369 会员关注
大数据的应用速度超过此前人们的预期,现在新的一轮风口吹向了AI,对于交互设计来说,数据交互才是核心的竞争力,今日头条类型的公司现在招聘都要求熟知各种算法,了解学习数据算法要趁早。——阿西UED随着大数据越来越被重视,数据采集的挑战变的尤为突出。今天为大家介绍几款数据...(more)
浏览2011
评论1
PMLS·2017-08-14
阿童木 · 某移动 擅长领域:服务器, 大数据, 人工智能
39 会员关注
本文调查分析了多个分布式机器学习平台所使用的设计方法,并提出了未来的研究方向。机器学习,特别是深度学习(DL),最近已经在语音识别、图像识别、自然语言处理、推荐/搜索引擎等领域获得了成功。这些技术在自主驾驶汽车、数字卫生系统、CRM、广告、物联网等方面都存在着非常有...(more)
浏览3367
网络安全·2017-08-09
time刚刚好 · 城商行 擅长领域:网络, 数据治理, 数据仓库
114 会员关注
传统的网络安全策略不再满足企业愈趋复杂的IT环境需求--再谈边界安全的消失技术创新改变了网络自身的本质。员工干活不再局限于自己的工作站,或者连接到公司网络的笔记本电脑。平板电脑、智能手机等移动设备成为了更为常见的东西,让员工得以远程办公,这还意味着不用改变办公...(more)
浏览1828
评论2

描述

大数据处理大致可分为四步:采集,导入/预处理,统计/分析,挖掘
大数据处理大致可分为四步:采集,导入/预处理,统计/分析,挖掘
X社区推广
  • 提问题