大数据(Big Data),是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合。具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。...(more)
来自主题:ceph
平台人生 平台人生  擅长领域:AIX, cpu, Oracle数据库
61 会员关注
作者:林青 对象存储是公有云中常见的非结构化数据存储解决方案,常被作为网站、移动应用、图片、视频数据的主要存储方式,也是CDN回源及云上数据备份的不二选择。对象存储采用无层次结构的数据存储方法。基于对象的存储不使用目录树,数据组织采用桶作为划分域,对象存储于桶...(more)
专栏: 平台人生
浏览3179
评论1
来自主题:大数据
黄呆毛 上海汽车  擅长领域:大数据, 存储, 开源软件
16 会员关注
在大数据领域,健康医疗行业是大家雄心勃勃想做出一番事业的热门目标行业。近期德勤进行的一项新调查显示,医疗界人士正在聚焦大数据分析,357名受访者中有84%认为大数据分析对他们的长期竞争成功来说“非常”或“非常重要”。 负责运维国家健康医疗大数据中心的杰若创一直对...(more)
浏览8158
评论1
Lucien168 滴滴  擅长领域:ceph, 对象存储, 分布式存储
17 会员关注
1. 节点故障检测概述 节点的故障检测是分布式系统无法回避的问题,集群需要感知节点的存活,并作出适当的调整。通常我们采用心跳的方式来进行故障检测,并认为能正常与外界保持心跳的节点便能够正常提供服务。一个好的故障检测策略应该能够做到: 及时:节点发生异常如宕机或网...(more)
浏览59
Lucien168 滴滴  擅长领域:ceph, 对象存储, 分布式存储
17 会员关注
1. Placement Rules 1.1 模拟代码 tack(a) choose choose firstn {num} type {bucket-type} chooseleaf firstn {num} type {bucket-type} if {num} == 0, choose pool-num-replicas buckets (all available). if {num} > 0 && < p...(more)
浏览49
推荐会员
  • 银河证券
    擅长领域:容器云, 微服务, 容器
    关注 76
  • 大型零售巨头
    擅长领域:系统运维, TSM, AIX
    关注 417
  • 阜新银行
    擅长领域:SVC, 双活
    关注 3
  • 神州数码系统集成服务有限公司
    擅长领域:SVC, 异构存储, 存储虚拟化
    关注 2
  • bank
    擅长领域:自动化运维
    关注 7
  • 锐捷网络股份有限公司
    关注 2
  • 来自主题:cognos
    青山松 传媒  擅长领域:服务器, windows, aix 5.3
    18 会员关注
    BAT里检查路径与变量
    来自主题:MySQL
    青山松 传媒  擅长领域:服务器, windows, aix 5.3
    18 会员关注
    我看你的网站里有空格之类 ,增加引号试试 curl --negotiate -u : "http://主机ip:对应端口/templeton/v1/ddl/ database? user.name=hive/XXX&like=*"
    来自主题:Redis
    yinxin 某集团公司  擅长领域:云计算, 虚拟化, Oracle
    687 会员关注
    Redis 在当前的技术社区里是非常热门的。从来自 Antirez 一个小小的个人项目到成为内存数据存储行业的标准,Redis已经走过了很长的一段路,大多数人可以正确地使用Redis,下面我们将探索正确使用 Redis 的10个技巧。 1、停止使用 KEYS * Okay,以挑战这个命令开始这篇文章,或许...(more)
    浏览51
    来自主题:安装配置
    yujin2010good 大型零售巨头  擅长领域:系统运维, TSM, AIX
    417 会员关注
    Head插件简介 ElasticSearch-head是一个H5编写的ElasticSearch集群操作和管理工具,可以对集群进行傻瓜式操作。 显示集群的拓扑,并且能够执行索引和节点级别操作搜索接口能够查询集群中原始json或表格格式的检索数据能够快速访问并显示集群的状态有一个输入窗口,允许任...(more)
    浏览59
    Lucien168 滴滴  擅长领域:ceph, 对象存储, 分布式存储
    17 会员关注
    1. 问题背景 1.1 客户端缓存问题 $ ceph -s health HEALTH_WARN mds0: Clien xxf-online00.gz01 failing to respond to cache pressure 官方解释 消息: “Client name failing to respond to cache pressure”代码: MDS_HEALTH_CLIENT_RECALL, MDS_HEALTH_CLIENT_R...(more)
    浏览109
    评论1
    来自主题:数据库
    杨文云 GBS
    1 会员关注
    我找了Cassandra,还不错,本想用redis,但redis对大量数据处理不行。
    来自主题:cognos
    凉风有序 存储  擅长领域:cognos
    2 会员关注
    今天开始记录cognos日常报错信息,如有描述不准的地方,请指出,1、R1901 PDS PPE 0104 已拒绝记录。 发生算术溢出错误cognos版本:10.2.1报错信息:R1901 PDS PPE 0104 已拒绝记录。 发生算术溢出错误解决方法:标签拉到最左边 2、transformer 模型无法刷新?我现在有2台windows服务...(more)
    浏览137
    来自主题:大数据
    匿名用户
    收藏10
    评价20
    金币5
    来自主题:Redis
    yinxin 某集团公司  擅长领域:云计算, 虚拟化, Oracle
    687 会员关注
    在网上看到有关Redis的50道面试题目,但是没有给出答案,之前我也在寻找这份试题的答案,特地把答案分享出来。有需要的可以看看咯 花了大量时间整理了这套Redis面试题 首发50题,绝无仅有,从入门到精通 从基础,高级知识点,再到集群,运维,方案… 弄明白了这些题可以说可以成为面霸...(more)
    浏览521
    评论2
    Lucien168 滴滴  擅长领域:ceph, 对象存储, 分布式存储
    17 会员关注
    MDS States 元数据服务器(MDS)在CephFS的正常操作过程中经历多个状态。例如,一些状态指示MDS从MDS的先前实例从故障转移中恢复。在这里,我们将记录所有这些状态,并包括状态图来可视化转换。 State Descriptions Common states 主从切换流程: handle_mds_map state chang...(more)
    浏览47
    来自主题:ceph
    Lucien168 滴滴  擅长领域:ceph, 对象存储, 分布式存储
    17 会员关注
    1.背景说明 继上次分享的《Ceph介绍及原理架构分享》和《分布式存储Ceph之PG状态详解》,这次分享点干货。用户需要从cephfs存储系统中检索一个大文件指定关键字的一行信息, 并且对延迟和性能要求比较高。 2. 原始方案 2.1 流程图 2.2 说明 假如用户拉取的文件大小...(more)
    浏览219
    来自主题:招聘
    Lancer 互联网  擅长领域:大数据, 中间件, Linux
    304 会员关注
    一、移动应用开发岗 岗位职责: 1.协助项目开发部经理进行业务系统需求分析;2.进行移动应用的系统设计,包括数据结构、数据接口、编程平台、模型设计、算法设计等;3.拟定数据采集、清洗、转换技术方案;4.根据设计进行代码编程;5.对编码进行测试;6.指导、培训公司业务人员进行系...(more)
    浏览4261
    来自主题:对象存储
    该来的总会来 华润  擅长领域:网络安全, 云计算, 大数据
    80 会员关注
    根据德勤的估算,非结构化数据在全球携带信息的内容中的占比高达80%-90%。从结构化数据中获取信息是企业数字化转型所必备的技能。而由于访问和处理非结构化数据既昂贵又困难,目前大多数企业对非结构化数据价值的开发还远远不够。 IDC预测,到2020年,相比做不到分析结构化数据...(more)
    浏览8180
    评论2
    来自主题:ceph
    yinxin 某集团公司  擅长领域:云计算, 虚拟化, Oracle
    687 会员关注
    1.问题: ceph health HEALTH_WARN application not enabled on 1 pool(s) 解决: ceph health detail HEALTH_WARN application not enabled on 1 pool(s)POOL_APP_NOT_ENABLED application not enabled on 1 pool(s) application not enabled on pool 'kube' ...(more)
    浏览60
    Lucien168 滴滴  擅长领域:ceph, 对象存储, 分布式存储
    17 会员关注
    一、相关依赖包安装 1. 安装依赖包 yum install libtool gcc gcc-c++ libuuid-devel keyutils-libs-devel  libblkid-devel redhat-lsb libedit-* yum install libatomic_ops-devel snappy-devel leveldb-devel libudev-devel cryptopp-*  fuse-deve...(more)
    浏览116
    来自主题:Redis
    yinxin 某集团公司  擅长领域:云计算, 虚拟化, Oracle
    687 会员关注
    概述 Redis是一个开源的,基于内存的结构化数据存储媒介,可以作为数据库、缓存服务或消息服务使用。 Redis支持多种数据结构,包括字符串、哈希表、链表、集合、有序集合、位图、Hyperloglogs等。 Redis具备LRU淘汰、事务实现、以及不同级别的硬盘持久化等能力,并且支持副本...(more)
    浏览169
    评论1
    来自主题:cognos
    amu0722 某服装行业  擅长领域:cognos, 数据库
    46 会员关注
    奇进偶不进https://baike.baidu.com/item/%E5%A5%87%E8%BF%9B%E5%81%B6%E8%88%8D/2237210?fr=aladdin
    浏览166
    回答1
    来自主题:ceph
    aditowh 某某某  擅长领域:存储资源池, ceph, 集中存储
    6 会员关注
    注意:1.要配置可以访问外网,需要通过apt源安装介质2.虚拟机配置可以很低,1core 512M 2个10G磁盘即可,学习环境网络只需要配置一个IP即可3.设置正确的apt源地址,要和操作系统版本匹配,楼主就因为一个小失误,刚接触Ubuntu不懂操作系统默认命名规则,导致install ceph一直找不到源。4...(more)
    浏览91
    评论1
    来自主题:大数据
    windix 蚂蚁金服  擅长领域:大数据, spark, Redis
    50 会员关注
    一、 前言 近年来互联网的新业形态快速涌现,互联网金融和金融大数据快速发展,对经济提质增效的促进作用不断凸显。阿里巴巴、腾讯、百度等数据研发应用企业开始引领数据产业的发展。同时政府和科研机构也高度关注大数据。2012年:广东省启动了《广东省实施大数据战略工作...(more)
    专栏: 最佳实践
    浏览3897
    评论1
    来自主题:ceph
    yinxin 某集团公司  擅长领域:云计算, 虚拟化, Oracle
    687 会员关注
    本文先介绍 Ceph, 然后会聊到一些正确使用 Ceph 的姿势;在集群规模小的时候,Ceph 怎么玩都没问题;但集群大了(到PB级别),这些准则可是保证集群健康运行的不二法门; Ceph 最初的目标是做一个分布式文件系统,直到现在这个目标也不能算完美实现;目前官网上对它的文件系统还是谨慎推荐...(more)
    浏览76
    来自主题:人工智能
    James_Liu AXA  擅长领域:Linux, 容器云, 性能参数
    76 会员关注
    【导读】知识图谱技术是人工智能技术的组成部分,其强大的语义处理和互联组织能力,为智能化信息应用提供了基础。我们专知的技术基石之一正是知识图谱-构建AI知识体系-专知主题知识树简介。下面我们特别整理了关于知识图谱的技术全面综述,涵盖基本定义与架构、代表性知识图谱...(more)
    浏览4620
    评论2
    智诩 hanergy
    5 会员关注
    收藏10
    评价21
    金币1
    来自主题:spark
    时东南 外资银行  擅长领域:spark, 大数据, 区块链
    106 会员关注
    1 概述 2015年以来,随着股市的持续火爆,中国证监会、证券业协会先后发布相关文件,要求对证券公司外部信息系统接入风险加强行业监管和自律。其中要求证券公司应当建立投资者证券、资金账户风险监测模型,动态监测账户交易行为特征、客户交易终端定位信息、账户资金进出等情况...(more)
    浏览3965
    评论1
    来自主题:大数据
    时东南 外资银行  擅长领域:spark, 大数据, 区块链
    106 会员关注
    收藏5
    评价12
    金币3
    来自主题:招聘
    Lancer 互联网  擅长领域:大数据, 中间件, Linux
    304 会员关注
    大数据平台运维工程师 岗位职责: 1.负责数据中心系统的日常运维工作;2.负责公司各类监管报送的报送工作;3.根据日常运维流程优化运维制度。 岗位要求: 1.本科(含)以上,一年(含)以上的工作经验。35岁(含)以下,男性。2.计算机或相关专业本科以上,有计算机网络、数据库、操作系统、开...(more)
    浏览3562
    来自主题:SVC
    wangshuai_go 平安科技  擅长领域:分布式存储, SVC, 云存储
    119 会员关注
    今天重点分析云存储的三种主要技术路线:存储虚拟化,SDS 软件定义分布式存储,对象存储。 存储虚拟化: 存储虚拟化更多是对传统块(FC SAN,IP SAN)的虚拟化。 其主要解决了企业内部传统存储资源无法有效进行存储资源整合和统一管理的难题。可以有效的提升整体存储资源的利用率和...(more)
    浏览2550
    评论3
    来自主题:智能运维
    zjwy82 bank  擅长领域:自动化运维
    7 会员关注
    个人浅见,技术发展过程中必然会有一些先驱探索,智能运维、自动化运维、传统运维之间并无很明显的界限划分。就我们情况而言,自动化运维并未发展到完全成熟的阶段,也已经在监控领域探索一些智能化的衍进,比如对于海量告警的压缩提取有效告警、告警的根因分析、利用大数据拟合动...(more)
    浏览621
    回答3
    来自主题:大数据平台
    yinxin 某集团公司  擅长领域:云计算, 虚拟化, Oracle
    687 会员关注
    你这是让大家给你出完整方案的节奏。
    来自主题:招聘
    Lancer 互联网  擅长领域:大数据, 中间件, Linux
    304 会员关注
    大数据平台运维工程师 岗位职责: 负责数据中心系统的日常运维工作; 负责公司各类监管报送的报送工作; 根据日常运维流程优化运维制度。 教育背景:本科(含)以上 工作经验:一年(含)以上的工作经验。 从业技能: 计算机或相关专业本科以上,有计算机网络、数据库、操作系统、开...(more)
    浏览4631
    来自主题:Redis
    yinxin 某集团公司  擅长领域:云计算, 虚拟化, Oracle
    687 会员关注
    引言 这个文档是正在开发中的 Redis 集群功能的规范(specification)文档, 文档分为两个部分: 第一部分介绍目前已经在 unstable 分支中实现了的那些功能。 第二部分介绍目前仍未实现的那些功能。 文档各个部分的内容可能会随着集群功能的设计修改而发生改变, 其中, 未实现...(more)
    浏览46
    来自主题:招聘
    Lancer 互联网  擅长领域:大数据, 中间件, Linux
    304 会员关注
    一、适用于所有岗位的应聘要求 · 诚实守信、公道正派、敬业爱岗、勇于创新;· 具有较强的工作责任心、良好的团队合作精神和组织协调沟通能力;· 具备良好的英语听说读写能力,能熟练运用电脑办公软件。· 特别优秀者,可适当放宽年龄、工作年限等基本应聘条件。 二、报名方...(more)
    浏览4799
    评论1
    guanziliu 某保险  擅长领域:ceph, 对象存储
    2 会员关注
    收藏2
    评价3
    金币1
    来自主题:AIX
    Lancer 互联网  擅长领域:大数据, 中间件, Linux
    304 会员关注
    1、技术顾问岗 工作职责 1.驱动制定全行应用系统架构规划、设计方案,并对开发实施方案进行评估审核,对重要平台选型、技术选型和方案策略进行评估和审定; 2.制定科技开发技术规范、技术平台标准以及发展战略,并结合相关规范进行评审、评估,针对技术、质量风险组织排查和相...(more)
    浏览6157
    来自主题:大数据
    匿名用户
    收藏3
    评价10
    金币5
    来自主题:大数据
    时东南 外资银行  擅长领域:spark, 大数据, 区块链
    106 会员关注
    收藏3
    评价10
    金币2
    来自主题:对象存储
    EricChan UIT  擅长领域:分布式存储, 对象存储, 文件存储
    48 会员关注
    应用的角度聊过了,我们再看看这三种存储的一些技术细节,首先看看在系统层级的分布。 我们从底层往上看,最底层就是硬盘,多个硬盘可以做成RAID组,无论是单个硬盘还是RAID组,都可以做成PV,多个PV物理卷捏在一起构成VG卷组,这就做成一块大蛋糕了。接下来,可以从蛋糕上切下很多块LV...(more)
    浏览3408
    评论6
    来自主题:大数据
    时东南 外资银行  擅长领域:spark, 大数据, 区块链
    106 会员关注
    收藏3
    评价7
    金币5
    来自主题:ceph
    zhangyou 华中科技大学
    应该是ceph crush的问题,
    浏览158
    回答2
    来自主题:数据库
    Lancer 互联网  擅长领域:大数据, 中间件, Linux
    304 会员关注
    一、信息科技部直属 架构管理部 1、架构管理部部门经理(1名) 岗位职责: (1)负责全行信息科技总体应用架构管理,统筹全行技术架构、数据架构管理;(2)参与核心系统、信贷系统、互联网渠道类系统、大数据类系统及基础设施架构设计及管理,推动整体架构的持续优化;(3)主导部门重大项目...(more)
    浏览5069
    评论2
    来自主题:Oracle数据库
    平台人生 平台人生  擅长领域:AIX, cpu, Oracle数据库
    61 会员关注
    作者:吴多刚 一、问君能有几多愁 脑补一下这些似曾相识的场景,你是不是也曾经历过。场景一:——系统响应时间长了,数据库有啥问题吗?——好多库呢,究竟是哪个库出现问题?——还不确定,逐个都看看吧DBA们登录主机、执行脚本、检查结果、分析原因…….场景二:——做一下例行检查...(more)
    专栏: 平台人生
    浏览5304
    评论1
    来自主题:大数据
    windix 蚂蚁金服  擅长领域:大数据, spark, Redis
    50 会员关注
    一、券商实施个性化推荐项目的必要性 1.1 个性化推荐技术发展背景 目前,随着用户接收到的信息量爆炸般增长,传统的推荐以及服务方式的边际收益正在不断减少,用户个性化的需求变得越来越多。大数据实时个性化服务,主要基于大数据用户画像、产品画像建设成果,结合实时流计算框...(more)
    专栏: 最佳实践
    浏览5455
    评论3
    来自主题:PostgreSQL
    yinxin 某集团公司  擅长领域:云计算, 虚拟化, Oracle
    687 会员关注
    常见问题 1.1)PostgreSQL 是什么?该怎么发音? 1.2)PostgreSQL 的版权是什么? 1.3)PostgreSQL 可以运行在哪些操作系统平台上? 1.4)我从哪里能得到 PostgreSQL? 1.5)我从哪里能得到对 PostgreSQL 的支持? 1.6)我如何提交一个BUG报告? 1.7)最新版的PostgreSQL 是什么? 1.8)...(more)
    浏览46
    来自主题:ceph
    yinxin 某集团公司  擅长领域:云计算, 虚拟化, Oracle
    687 会员关注
    1 Ceph基础介绍 Ceph是一个可靠地、自动重均衡、自动恢复的分布式存储系统,根据场景划分可以将Ceph分为三大块,分别是对象存储、块设备存储和文件系统服务。在虚拟化领域里,比较常用到的是Ceph的块设备存储,比如在OpenStack项目里,Ceph的块设备存储可以对接OpenStack的cinde...(more)
    浏览215
    来自主题:Redis
    yinxin 某集团公司  擅长领域:云计算, 虚拟化, Oracle
    687 会员关注
    内存管理优化 Redis Hash是value内部为一个HashMap,如果该Map的成员数比较少,则会采用类似一维线性的紧凑格式来存储该Map, 即省去了大量指针的内存开销,这个参数控制对应在redis.conf配置文件中下面2项: hash-max-zipmap-entries 64 hash-max-zipmap-value 512 当value这...(more)
    浏览41
    来自主题:对象存储
    刘东 东软集团  擅长领域:LinuxONE, 超融合架构, 对象存储
    526 会员关注
    收藏6
    评价20
    金币2
    智诩 hanergy
    5 会员关注
    收藏3
    评价12
    金币1
    社区热点,是社区内被人关注和参与更多的内容, 通过算法自动筛选出来的,请 注册登录,然后就可以观看更多正在发生的热点和精华,并能加入交流。

    关于TWT 使用指南 社区专家合作 厂商入驻社区 企业招聘 投诉建议 版权与免责声明 联系我们
    © 2018 talkwithtrend — talk with trend,talk with technologist 京ICP备09031017号-30