大数据处理
大数据处理
大数据处理大致可分为四步:采集,导入/预处理,统计/分析,挖掘
大数据处理大致可分为四步:采集,导入/预处理,统计/分析,挖掘

动态

jillme 课题专家组 某大型银行   擅长领域:数据库, 国产数据库, 人工智能
17 会员关注
文章阐述了AIOPS的同业应用现状,以及AIOPS的应用综述,建议在应用场景和AIOPS构建方面,能有具体场景实例的解决方案,帮助读者进一步了解AIOPS与自动化运维在智能方向上的差异,提升和发展趋势。...(more)
专栏: 趋势观点 
浏览1296
评论7
机器学习· 2024-03-11
jinhaibo 课题专家组 昆仑银行   擅长领域:人工智能, 数据库, 大数据
4 会员关注
根据需求,主要是处理30亿条交易数据,并利用机器学习为交易地址打上标签,使用Hadoop和Spark是一个合适的大数据平台方案。数据量:Hadoop适合存储海量的数据,并提供了多种技术组件用于查询和分析,由于本需求是30亿条数据进行存储和处理,所以选择Hadoop是合适的。Spark是基于内存的...(more)
银行大语言模型· 2024-02-25
大模型作为新的应用范式,对数据存储的需求与传统业务有所不同。本议题交流核心是分析大模型应用对数据存储需求的特殊性在哪些方面? 又有哪些与传统业务数据存储需求一致的地方?...(more)
浏览2194
银行大语言模型· 2024-02-23
微调过程中,有很多种种任务,如何收集和标注多种情况的数据,对提升大模型的综合能力应对有重要意义,希望大家可以针对:长尾场景下的数据如何清洗进行探讨,可以从方法,措施,以及注意点方面进行共识交流?...(more)
浏览1638
医院数据存储· 2024-01-05
存储作为数据安全的最后一道防线,离数据最近,需要关注数据的韧性能力,即当网络层、主机层被攻破后,能提供至少一份安全数据副本,该安全数据副本具备尽可能不被攻击、不被恶意破坏、数据内容干净有效可恢复。实现数据的快速安全恢复。...(more)

描述

大数据处理大致可分为四步:采集,导入/预处理,统计/分析,挖掘
大数据处理大致可分为四步:采集,导入/预处理,统计/分析,挖掘
X社区推广
  • 提问题