2020-07-19：给你两千万条数据，你会如何添加到缓存中？

福大大架构师每日一题 2020-07-19 07:41:09

2020-07-19：给你两千万条数据，你会如何添加到缓存中？

...全文

5578 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

vcshcn 2020-07-21

打赏
举报

回复

首先要评估每条数据有多大，每条数据是1k和1g方法肯定不同了

s478853630 2020-07-20

打赏
举报

回复

我选择不添加缓存，优化sql

缓存机制说明缓存机制原理说明缓存机制: 缓存中的数据,一定是数据库中的数据,使用缓存主要的目的就是降低用户访问物理设备的频次. 如果数据库记录更新,则缓存应该同步更新. 1.缓存的数据结构 K-V结构进行数据保存 2. 开发语言选择 C语言程序 3. 缓存数据的运行环境在内存中, 断电即擦除. 将内存数据进行持久化操作. 4. 如果不停的添加缓存的记录肯定会造成内存溢出. 定期优化缓存机制. 1.LRU算法 2.LFU算法 3.Random 4.TTL 5. 缓存也需要实现高可用机制.搭建缓存集群.

MySQL大数据量分页查询方法及其优化 ---方法1: 直接使用数据库提供的SQL语句 ---语句样式: MySQL中,可用如下方法: SELECT * FROM 表名称 LIMIT M,N ---适应场景: 适用于数据量较少的情况(元组百/千级) ---原因/缺点: 全表扫描,速度会很慢且有的数据库结果集返回不稳定(如某次返回1,2,3,另外的一次返回2,1,3). Limit限制的...

1、什么是Redis? Redis 是完全开源免费的，遵守BSD协议，是一个高性能的key-value数据库。 Redis 与其他 key - value 缓存产品有以下三个特点： Redis支持数据的持久化，可以将内存中的数据保存在磁盘中，重启的时候可以再次加载进行使用。Redis不仅仅支持简单的key-value类型的数据，同时还提供list，set，zset，hash等数据结构的存储。...

ylbtech-云-阿里云-百科：阿里云阿里云，阿里巴巴集团旗下云计算品牌，全球卓越的云计算技术和服务提供商。创立于2009年，在杭州、北京、硅谷等地设有研发中心和运营机构。阿里云创立于2009年，是全球领先的云计算及人工智能科技公司，致力于以在线公共服务的方式，提供安全、可靠的计算和数据处理能力，让计算和人工智能成为普惠科技。阿里云服务着制造、金融、政务、交通...

51,396

社区成员

85,838

社区内容

发帖

与我相关

我的任务

javaspring bootspring cloud 技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章