大数据(Big Data),是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合。具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。...(more)
来自主题:spark
匿名用户
收藏1
评价4
金币1
来自主题:SVC
邓毓 江西农信  擅长领域:存储双活, SVC, 双活数据中心
599 会员关注
双活数据中心解决方案指两个数据中心均处于运行状态,可以同时承担生产业务,以提高数据中心的整体服务能力和系统资源利用率,实现RPO(Recovery Point Objective),RTO(Recovery Time Objective)严苛的要求,将企业业务系统连续性提升至一个更高的台阶。目前,端到端双活数据中心解决方...(more)
专栏: 最佳实践
浏览3512
评论6
来自主题:大数据
黄呆毛 上海汽车  擅长领域:大数据, 存储, 开源软件
23 会员关注
在大数据领域,健康医疗行业是大家雄心勃勃想做出一番事业的热门目标行业。近期德勤进行的一项新调查显示,医疗界人士正在聚焦大数据分析,357名受访者中有84%认为大数据分析对他们的长期竞争成功来说“非常”或“非常重要”。 负责运维国家健康医疗大数据中心的杰若创一直对...(more)
浏览9004
评论3
来自主题:非结构化数据
该来的总会来 华润  擅长领域:网络安全, 云计算, 大数据
103 会员关注
根据德勤的估算,非结构化数据在全球携带信息的内容中的占比高达80%-90%。从结构化数据中获取信息是企业数字化转型所必备的技能。而由于访问和处理非结构化数据既昂贵又困难,目前大多数企业对非结构化数据价值的开发还远远不够。 IDC预测,到2020年,相比做不到分析结构化数据...(more)
浏览8863
评论2
来自主题:灾备演练
邓毓 江西农信  擅长领域:存储双活, SVC, 双活数据中心
599 会员关注
由于灾难演练过程时间窗口有限,在生产切到在灾备做真实的业务演练后,会产生很多演练数据,值得关注的是账务数据和真实客户数据,据我了解,通用的做法有三种:1、建立了生产和灾备存储间的实时/异步同步和切换后的反向复制,当生产切到灾备后,复制关系也将同步反转,由灾备存储实时/异...(more)
浏览252
回答1
来自主题:招聘
Lancer 互联网  擅长领域:大数据, 中间件, MySQL
413 会员关注
工资 25-50W/Y 工作地点 北京市海淀区知春路111号理想大厦 投递规范: 请发送【英文简历】至 beixicheng@hiretual.com 标题:【姓名】【来自XXX】 工作职能:负责 Hiretual 产品侧 前后端 开发 (React.js + node.js + golang) 我们希望你: 你的工作内容将是 SasS(Softw...(more)
浏览1764
来自主题:招聘
Lancer 互联网  擅长领域:大数据, 中间件, MySQL
413 会员关注
单位:招商银行总行信息技术部工作地点:深圳/上海总行正式编制,提供同业有竞争力的薪酬福利 多个开放系统管理岗位(地点:深圳或上海,名额:若干) (社会招聘要求通用要求为:重点大学本科以上学历,33周岁以下) IaaS资源规划管理岗 岗位职责:1、负责保证现有IaaS架构的高可用,可扩展,支撑...(more)
浏览7425
来自主题:Hadoop
匿名用户
收藏15
评价30
金币5
来自主题:机器学习
总有刁民想害朕 ansteel  擅长领域:Kubernetes, Swarm, docker
54 会员关注
1 项目概述 本项目需解决的问题 本项目通过利用P2P平台Lending Club的贷款数据,进行机器学习,构建贷款违约预测模型,对新增贷款申请人进行预测是否会违约,从而决定是否放款。 建模思路 以下是本次项目机器学习工作流程,实际操作中,其实每个步骤都是反复迭代的过程。 2 场...(more)
浏览9078
评论1
来自主题:SVC
邓毓 江西农信  擅长领域:存储双活, SVC, 双活数据中心
599 会员关注
在上篇文章《五种业界主流存储双活方案解析(方案特点)》中,笔者从华为 HyperMetro 、 EMC Vplex 、 IBM SVC 、 HDS GAD 和 NetApp MetroCluster 等五个厂商方案的特点入手,详细介绍了这些方案的存储层组网、 I/O 访问路径、数据一致性保证(读写缓存、锁、同步技术等)和独特的...(more)
专栏: 最佳实践
浏览3323
评论2
来自主题:分布式存储
智诩 hanergy
9 会员关注
收藏27
评价41
金币1
来自主题:spark
时东南 外资银行  擅长领域:知识图谱, spark, 机器学习
173 会员关注
1 概述 2015年以来,随着股市的持续火爆,中国证监会、证券业协会先后发布相关文件,要求对证券公司外部信息系统接入风险加强行业监管和自律。其中要求证券公司应当建立投资者证券、资金账户风险监测模型,动态监测账户交易行为特征、客户交易终端定位信息、账户资金进出等情况...(more)
浏览6810
评论1
来自主题:分布式存储
fanyqing 厦门银行  擅长领域:分布式存储, swift, hdfs
6 会员关注
摘 要: 随着数字化转型的深入,海量数据对存储提出了新的要求。传统存储虽然有技术成熟、性能良好、可用性高等优点,但面对海量数据,其缺点也越来越明显:如扩展性差、成本高等。为了克服上述缺点,满足海量数据的存储需求,市场上出现了分布式存储技术。 分布式存储系统,通常包括...(more)
浏览8363
评论1
来自主题:云平台
Lancer 互联网  擅长领域:大数据, 中间件, MySQL
413 会员关注
滴滴运维部_机器学习平台运维研发工程师 工作职责: 保障滴滴机器学习平台的稳定性和性能,提升平台的运维效率 建立和完善监控体系、故障预案和运维标准等 参与或负责机器学习平台自动化运维系统的设计、开发 研究大数据分析、深度学习、强化学习等人工智能前沿技术,满足...(more)
浏览6300
评论1
来自主题:人工智能
James_Liu AXA  擅长领域:Linux, 知识图谱, 容器云
97 会员关注
【导读】知识图谱技术是人工智能技术的组成部分,其强大的语义处理和互联组织能力,为智能化信息应用提供了基础。我们专知的技术基石之一正是知识图谱-构建AI知识体系-专知主题知识树简介。下面我们特别整理了关于知识图谱的技术全面综述,涵盖基本定义与架构、代表性知识图谱...(more)
浏览7119
评论2
来自主题:Linux
Lancer 互联网  擅长领域:大数据, 中间件, MySQL
413 会员关注
1、技术顾问岗 工作职责 1.驱动制定全行应用系统架构规划、设计方案,并对开发实施方案进行评估审核,对重要平台选型、技术选型和方案策略进行评估和审定; 2.制定科技开发技术规范、技术平台标准以及发展战略,并结合相关规范进行评审、评估,针对技术、质量风险组织排查和相...(more)
浏览7758
来自主题:SVC
邓毓 江西农信  擅长领域:存储双活, SVC, 双活数据中心
599 会员关注
在之前的文章《五种业界主流存储双活方案解析(方案特点)》中,笔者对华为 HyperMetro 、 EMC Vplex 、 IBM SVC 、 HDS GAD 和 NetApp MetroCluster 等五个厂商存储双活方案的特点、仲裁需求、仲裁机制和两地三中心扩展方案进行了详细的解析。在本篇文章中,笔者将从另一个角度...(more)
专栏: 最佳实践
浏览7757
评论3
来自主题:spark
阳海 某平台架构部高级技术经理  擅长领域:分布式数据库, 数据库, MySQL
226 会员关注
1.你既然了解这些,不然后自己装上去试试,体会下和自己需求的切合度。2.目前这几个工具都有一定的公司在使用,应用相对比较多的是HUE, Oozie 。
浏览700
回答1
来自主题:大数据
匿名用户
收藏5
评价17
金币5
来自主题:spark
windix 蚂蚁金服  擅长领域:大数据, spark, 大数据组件
121 会员关注
一、券商实施个性化推荐项目的必要性 1.1 个性化推荐技术发展背景 目前,随着用户接收到的信息量爆炸般增长,传统的推荐以及服务方式的边际收益正在不断减少,用户个性化的需求变得越来越多。大数据实时个性化服务,主要基于大数据用户画像、产品画像建设成果,结合实时流计算框...(more)
专栏: 最佳实践
浏览7162
评论4
来自主题:Hadoop
时东南 外资银行  擅长领域:知识图谱, spark, 机器学习
173 会员关注
收藏9
评价22
金币3
来自主题:大数据
VOLVO 农信社  擅长领域:大数据, 知识图谱, 银行知识图谱
43 会员关注
摘要 在银行日常经营中,无论是风险防控还是客户营销,都有较多的关联关系数据分析场景,如担保圈、洗钱模型、资金链追踪等。因传统关系型数据库的数据建模和数据储存结构原因,其在关联关系分析的应用方案弊端较多。本文介绍了某省农信社将图数据库和图算法等知识图谱理论的相...(more)
专栏: 最佳实践
浏览5666
评论7
来自主题:数据备份
王巧雷 Veritas  擅长领域:数据备份, TSM, 备份
849 会员关注
复制技术、cdm、cdp这些吧,感觉像根据需求细化的市场。如同很多了存储复制、或者数据库复制的最后还有上备份。 这个界限很难区分,传统的备份软件也在与时俱进,比如hbase、mongodb等都开始支持,两者互相渗透吧。...(more)
浏览1032
回答1
来自主题:需求分析
  • 时间:2017-09-29
  • 地点: 线上活动
  • 状态: 已结束
  • 浏览59036
    报名53
    来自主题:spark
    阿童木 某移动  擅长领域:机器学习, 机器学习平台, spark
    34 会员关注
    本文调查分析了多个分布式机器学习平台所使用的设计方法,并提出了未来的研究方向。 机器学习,特别是深度学习(DL),最近已经在语音识别、图像识别、自然语言处理、推荐/搜索引擎等领域获得了成功。这些技术在自主驾驶汽车、数字卫生系统、CRM、广告、物联网等方面都存在着非常...(more)
    浏览1452
    来自主题:华为
    lxue 某互联网公司  擅长领域:数据库, 数据丢失, PostgreSQL 10
    28 会员关注
    因华为误操作导致广西80万移动用户数据丢失一事仍在发酵中,近日,有消息称,因为此次事故,华为已经被中国移动处以5亿罚款,同时中国移动已经展开全国范围的系统大排查,主要针对华为第三方代维隐患问题。 据了解,此次故障影响面非常大,涉及到钦州、北海、防城港、桂林、梧州、贺州...(more)
    浏览4053
    评论4
    来自主题:Hadoop
    时东南 外资银行  擅长领域:知识图谱, spark, 机器学习
    173 会员关注
    收藏6
    评价17
    金币2
    来自主题:大数据
    时东南 外资银行  擅长领域:知识图谱, spark, 机器学习
    173 会员关注
    收藏8
    评价9
    金币5
    来自主题:招聘
    Lancer 互联网  擅长领域:大数据, 中间件, MySQL
    413 会员关注
    **公司简介****** 百炼智能 (bailian.ai)2018 年 3 月在北京注册成立,成立一年先后获得天使轮 1000 万元和 Pre-A 轮 5000 万元投资。 百炼智能是专注于智能获客的人工智能公司,旨在应用 AI 技术,把互联网上非结构化的商业信息,转化为有效的销售线索,帮助企业实现智能获客。...(more)
    浏览4742
    来自主题:认知医疗
  • 时间:2017-08-02
  • 地点: 线上活动
  • 状态: 已结束
  • 浏览61385
    报名68
    来自主题:云计算
    Lancer 互联网  擅长领域:大数据, 中间件, MySQL
    413 会员关注
    一、信息科技部直属 架构管理部 1、架构管理部部门经理(1名) 岗位职责: (1)负责全行信息科技总体应用架构管理,统筹全行技术架构、数据架构管理;(2)参与核心系统、信贷系统、互联网渠道类系统、大数据类系统及基础设施架构设计及管理,推动整体架构的持续优化;(3)主导部门重大项目...(more)
    浏览5765
    评论2
    来自主题:MySQL
  • 时间:2017-01-12
  • 地点: 线上活动
  • 状态: 已结束
  • 浏览182234
    报名86
    来自主题:spark
    cys866 上海优铭云计算有限公司  擅长领域:spark, Hadoop, 大数据
    7 会员关注
    数据湖项目的可行性 a)数据湖技术 大数据的出现,以及大数据处理平台Hadoop架构的出现,催生了数据湖的产生。最初数据湖的概念是2011年首先出现的,可以说,就像数据仓库是处理结构化数据的过程一样,数据湖是Hadoop用于处理大数据,包含结构化数据,非结构化数据的过程。虽然使用的...(more)
    专栏: 最佳实践
    浏览4719
    评论1
    来自主题:分布式存储
    Lucien168 滴滴  擅长领域:ceph, 分布式存储, CephFS
    69 会员关注
    1. 梳理ceph_backup功能策略 [rbd] window size = 7 #窗口大小结合时间,超过窗口大小就会做全量备份,然后删除增量备份 window unit = days #备份的时间(minutes, hours, days, weeks, months) destination directory = /tmp/ #备份目录 images = zp #支持多个imag...(more)
    浏览899
    评论2
    来自主题:大数据
    yeliye 某农信  擅长领域:数据库, 数据中心, 高可用
    1 会员关注
    Integer programming, 整数规划是指规划中的变量(全部或部分)限制为整数;如果所有决策变量均要求为整数,则是纯整数规划pure integer programming;如果部分决策变量要求为整数,则是混合整数规划,mixedinteger programming. 一、业务问题描述:这是一个仓库选址和配送的问题,具体要...(more)
    浏览4485
    评论1
    来自主题:spark
    哈杜普 百度  擅长领域:大数据, 流处理, 批处理
    28 会员关注
    前言 说起大数据处理,一切都起源于Google公司的经典论文:《MapReduce:Simplied Data Processing on Large Clusters》。在当时(2000年左右),由于网页数量急剧增加,Google公司内部平时要编写很多的程序来处理大量的原始数据:爬虫爬到的网页、网页请求日志;计算各种类型的派生数据...(more)
    浏览2939
    来自主题:超融合
    yinxin 某金融机构  擅长领域:虚拟化, 云计算, 数据库系统
    754 会员关注
    具体可以参考如下链接中的对比:http://www.talkwithtrend.com/Question/418459
    浏览6218
    回答1
    来自主题:大数据
  • 时间:2017-10-13
  • 地点: 线上活动
  • 状态: 已结束
  • 浏览64704
    报名33
    来自主题:对象存储
    haozhangsir 银华  擅长领域:VPLEX, IBM Cloud Object Storage, ceph
    14 会员关注
    1:对象存储 存储局域网(SAN)和网络附加存储(NAS)是目前两种主流传统的网络存储架构,而对象存储(Object-based Storage)是一种新的网络存储架构。1999年成立的全球网络存储工业协会(SNIA)的对象存储设备工作组发布了ANSI的X3T10标准。总体上来讲,对象存储综合了NAS和SAN的优点,同时...(more)
    专栏: 最佳实践
    浏览4829
    评论5
    来自主题:分布式存储
    Garyy 某保险  擅长领域:容器, docker, Kubernetes
    229 会员关注
    前言: 物联网 (IoT) 的蓬勃发展推动了结构化/非结构化数据的空前增长,不仅给企业带来了发掘新客户、创造新收入来源的巨大机会。也给企业传统存储架构带来了很大的挑战,具体表现: 1)弹性扩展能力差,扩容成本高 2)运维管理复杂,对运维人员技术能力要求高3)多种异构存储之间易形成...(more)
    专栏: 活动总结
    浏览3766
    来自主题:分布式存储
    Lucien168 滴滴  擅长领域:ceph, 分布式存储, CephFS
    69 会员关注
    1. Ceph架构介绍 Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。 特点如下:- 高性能 - a. 摒弃了传统的集中式存储元数据寻址的方案,采用CRUSH算法,数据分布均衡,并行度高。 - b.考虑了容灾域的隔离,能够实现各类负载的副本放置规则,例如跨...(more)
    浏览2135
    来自主题:大数据
    王作敬 银河证券  擅长领域:容器云, 微服务, 容器
    125 会员关注
    作者:王作敬/汪照辉 在大数据技术、人工智能、云计算等新技术的驱动下,证券公司的业务模式正在发生巨大的变化。证券公司未来的竞争,本质上是对客户的竞争,因此开发新客户、盘活老客户,深入洞察和了解客户,将合适的产品推荐给合适的客户,提高客户服务质量,实现公司与客户的双赢,...(more)
    专栏: 趋势观点
    浏览3990
    来自主题:CMDB
  • 时间:2019-07-24
  • 地点: 线上活动
  • 状态: 已结束
  • 浏览25093
    报名37
    来自主题:大数据
  • 时间:2018-10-19
  • 地点: 线上活动
  • 状态: 已结束
  • 浏览34136
    报名30
    来自主题:分布式存储
  • 时间:2019-04-26
  • 地点: 线上活动
  • 状态: 已结束
  • 浏览42161
    报名152
    来自主题:招聘
    Lancer 互联网  擅长领域:大数据, 中间件, MySQL
    413 会员关注
    一、适用于所有岗位的应聘要求 · 诚实守信、公道正派、敬业爱岗、勇于创新;· 具有较强的工作责任心、良好的团队合作精神和组织协调沟通能力;· 具备良好的英语听说读写能力,能熟练运用电脑办公软件。· 特别优秀者,可适当放宽年龄、工作年限等基本应聘条件。 二、报名方...(more)
    浏览5921
    评论1
    来自主题:大数据
  • 时间:2018-12-28
  • 地点: 线上活动
  • 状态: 已结束
  • 浏览20033
    报名30
    来自主题:脑裂
    王磊磊 移动  擅长领域:AIX, SVC, 云计算
    146 会员关注
    Namenode HA原理详解 社区hadoop2.2.0 release版本开始支持NameNode的HA,本文将详细描述NameNode HA内部的设计与实现。 为什么要Namenode HA? NameNode High Availability即高可用。 NameNode 很重要,挂掉会导致存储停止服务,无法进行数据的读写,基于此NameNode的计算(MR,H...(more)
    浏览1088
    来自主题:大数据
    空kong 某单位
    1 会员关注
    收藏5
    评价7
    金币1

    关于TWT 使用指南 社区专家合作 厂商入驻社区 企业招聘 投诉建议 版权与免责声明 联系我们
    © 2019 talkwithtrend — talk with trend,talk with technologist 京ICP备09031017号-30