社区
云存储
帖子详情
目前流行的分布式存储和运算技术都有哪些?
ewili
2015-01-13 04:39:44
各位大侠,我们现在有这样一个场景
1.有一张百亿级数据量的表
2.业务要求数据库为关系型数据库
3.需要提高查询和数据分析效率
4.可用中间件解决
我们目前找到的方案有cobar和Tddl以及nuodb,请问各位大侠有没有更好的方案,同时了解过这几种技术的大侠请帮我们分析下哪种更适合我们
...全文
457
回复
打赏
收藏
目前流行的分布式存储和运算技术都有哪些?
各位大侠,我们现在有这样一个场景 1.有一张百亿级数据量的表 2.业务要求数据库为关系型数据库 3.需要提高查询和数据分析效率 4.可用中间件解决 我们目前找到的方案有cobar和Tddl以及nuodb,请问各位大侠有没有更好的方案,同时了解过这几种技术的大侠请帮我们分析下哪种更适合我们
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
现在主流开源分布式系统架构都有哪些?
分布式计算Hadoop分布式系统现在主流开源分布式系统架构都有哪些?关注者950被浏览112,808关注问题写回答添加评论分享邀请回答14 个回答默认排序知乎用户68 人赞同了该回答分布式系统是一个非常广泛的概念,它最终要落实到解决实际问题上,不同的问题有不同的方法和架构。所有的开源软件都是以某个应用场景出现,而纯粹以“分布式”概念进行划分的比较少见。但如果以算法划分,到能分出几类:1....
大规模
分布式存储
系统 - 读书笔记
文章目录大规模
分布式存储
系统(原理解析与架构实战OceanBase)第1章 概述1.1
分布式存储
概述1.2
分布式存储
分类第一篇 基础篇第2章 单机存储系统2.1 硬件基础2.1.1 CPU架构2.1.2 IO总线2.1.3 网络拓扑2.1.4 性能参数2.1.5 存储层次架构2.2 单机存储引擎2.2.1 哈希存储引擎2.2.2 B树存储引擎2.2.3 LSM树存储引擎2.3 数据模型2.3.1 文件模型2.3.2 关系模型2.3.3 键值模型2.3.4 SQL与NoSQL2.4 事务与并发控制2.4.
人工智能大模型
技术
基础系列之:分布式模型存储与加载
随着人工智能
技术
的快速发展,大规模语言模型(Large Language Models, LLMs)如GPT-3、BERT、T5等在自然语言处理领域取得了突破性进展。这些模型通常包含数十亿甚至上千亿个参数,为了有效地存储、加载和推理如此庞大的模型,分布式
技术
成为了不可或缺的解决方案。本文将深入探讨大模型
分布式存储
与加载的核心
技术
,包括模型并行、张量并行、流水线并行等关键概念,以及它们在实际应用中的实现方法和优化策略。
从分布式云计算理解区块链
技术
什么是分布式云计算? 首先来看一段维基百科的定义:分布式计算,又被称为分散式
运算
,主要研究分布式系统如何进行计算。分布式系统是一组计算机,透过网络相互连接传递消息与通信后并协调它们的行为而形成的系统,组件之间彼此进行交互以实现一个共同的目标。把需要进行大量计算的工程数据分割成小块,由多台计算机分别计算,再上传
运算
结果后,将结果统一合并得出数据结论的科学。分布式系统的例子来自有所不同的面向服务的架构...
什么是分布式数据库?小学生都能看懂。
自从互联网进入了 web2.0 时代以来,数据库作为核心的底层基础设施软件也经历了蓬勃的发展期,从早期的单机关系型数据库到NoSQL 再到如今的 NewSQL,数据库领域不管是
技术
还是场景都发生了巨大的变化。在当下云原生时代,任何软件系统拥有分布式能力似乎成了标配。特别是在
目前
基础软件国产化的浪潮下,国产数据库百花齐放,大有弯道超车的趋势。在这个领域里面,分布式数据库无疑是当今最热门的赛道,本期就带大家来了解什么是分布式数据库。回答这个问题之前,我们暂且不去考虑各种官方定义,不妨换个思路入手把这个名词做下拆
云存储
932
社区成员
652
社区内容
发帖
与我相关
我的任务
云存储
云计算 云存储相关讨论
复制链接
扫一扫
分享
社区描述
云计算 云存储相关讨论
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章