大数据(Big Data),是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合。具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。...(more)
机器学习·2024-03-08
目前是技术方案选择的问题我们目前拥有离线区块链交易数据数据体量:30亿条交易数据,每条交易包含10个字段(主要的字段:发送地址、收款地址、交易类型、交易金额)我们想做的:根据业务需求提出分析策略,利用机器学习建立模型输出分析结果,为交易地址打上标签策略比如:实体聚集:多个账...(more)
浏览926
软件开发MySQL·2024-03-04
请问各位大拿,实际生产环境中,MySQL写到Redis读的过程是实时还是异步?即Redis是否需要立刻支持读到前端写的数据?如果是异步的,时延一般是多少,比如XX秒还是XX分钟?
浏览1941
软件开发NAS(网络附属存储)·2024-02-28
测试数据用sysbench写20个表x每表25000条数据,同步到redis要花半小时。请问各位大拿,问题出在什么地方呢?
浏览1285
银行大语言模型·2024-01-15
大模型作为新的应用范式,对数据存储的需求与传统业务有所不同。本议题交流核心是分析大模型应用对数据存储需求的特殊性在哪些方面? 又有哪些与传统业务数据存储需求一致的地方?...(more)
浏览2194
银行大语言模型·2024-01-15
大模型数据治理目前看主要有如下几种方式,大家可以谈谈自己企业倾向哪些模式,并且可以结合您的企业谈谈您选择这个倾向模式的理由。通过这个投票话题的交流,可以很好让同业结合企业自身情况,应该如何选择大模型数据治理模式,感谢!...(more)
浏览2369
银行大语言模型·2024-01-11
讨论如何培养精通数理统计方法,具备软件工程能力,熟悉人工智能、大数据、云计算等前沿技术,能说会写,并对企业的业务流程、数据逻辑具有深入理解的复合型专业人才。
浏览614
互联网服务人工智能·2024-01-11
中央经济工作会议明确提出,要以科技创新推动产业创新,特别是以颠覆性技术和前沿技术催生新产业、新模式、新动能,发展新质生产力。这为新时代新征程加快科技创新、推动高质量发展提供了科学指引。深刻认识和把握新质生产力的内涵和特点,认清新质生产力的形成规律,营造有利于新...(more)
浏览1209
大语言模型·2024-01-11
本期讨论话题重点围绕:数据湖、湖仓一体、数据仓库等基础统一数据平台建设,对大型模应用的影响: 讨论企业如何建设好数据湖、湖仓一体、数据仓库等平台(包括架构设计、数据库选型、数据采集策略选择、数据质量校验机制建立、数据整合策略选择等),以有效支持大模型的应用?这块大...(more)
浏览961
银行数据仓库·2024-01-10
大模式如何与原有架构(如数据湖、湖仓一体、数据仓库)相结合,成为了企业架构中需要考虑的问题。企业需要对现有的数据架构进行全面的评估,了解其功能、数据处理能力、存储容量、查询性能等,有助于确定大模型与原有架构结合的方式和可行性。企业还需定义统一的集成接口标准,使大...(more)
浏览1145
银行大语言模型·2024-01-10
由于建设成本和建设需求的局限,部分企业并没有建设成熟的数据湖、湖仓一体,只能通过人工收集大量文本数据等非结构化信息,在这样的情况下,如何快速推动大模型技术的落地?
浏览918
银行大语言模型·2024-01-10
数据湖、湖仓一体、数据仓库等原有架构,在数据可视化方面往往较为成熟,如何与大模型技术结合起来充分发挥可视化的优势?例如在大模型对话过程中,引入可视化的元素,在回答中不拘泥于文本形式,增加图形、表格、拓扑图等等。...(more)
浏览582
银行大语言模型·2024-01-10
目前,企业使用大模型,最常见的应用场景是供企业内部使用的智能问答系统和对外服务的智能客服系统。这两个场景的建设过程,需要收集企业内外大量的文本信息作为训练数据,那么,数据湖或“湖仓一体”对于数据的收集、汇总、清洗、标记、加工等能起到什么积极作用?对于模型的训练过...(more)
浏览595
银行大语言模型·2024-01-10
部分企业使用传统数据库或数据仓库支撑业务分析系统,其中绝大部分数据是结构化的,例如业务流水表、财务报表等。即使是使用大数据平台抽取的业务日志和系统日志等,也往往是解析为结构化数据来加以运用的。在大模型的落地过程中,如何运用这些结构化数据?...(more)
浏览446
大语言模型·2024-01-10
在银行系统中,业务部门获取数据的方式困难,门槛较高。能否有一项利用大模型实现类似于chatgpt问答的方法(使用自然语言提问,chatgpt返回正常可执行的SQL)从而降低业务部门对技术的关注度,增加对数据的关注度和分析。要实现这种功能,在模型选型,语料规模,提示词选择方面,有没有存在...(more)
浏览558
银行大语言模型·2024-01-10
微调过程中,有很多种种任务,如何收集和标注多种情况的数据,对提升大模型的综合能力应对有重要意义,希望大家可以针对:长尾场景下的数据如何清洗进行探讨,可以从方法,措施,以及注意点方面进行共识交流?...(more)
浏览1641
    X社区推广