自己做个简易的java代码缓存解决高并发

Retank 2018-09-08 06:04:45
设计思路:
1.做一个共享资源,hasmap对象为容器;
2.请求类实现runnable接口,代码中请求的数据放在同步块中调用共享资源;

本人测了,稳定,但是很耗cpu资源,内存需求很少,这样的设计方式实际应用是否可行?
...全文
1848 16 打赏 收藏 转发到动态 举报
写回复
用AI写文章
16 条回复
切换为时间正序
请发表友善的回复…
发表回复
ITjavaman 2018-09-14
  • 打赏
  • 举报
回复
单个线程都满载了,你还想多线程更快么- -
既然是批量操作数据库,按目前情况,你的瓶颈应该是数据库连接以及批量提交这方面,而不是你的线程
Retank 2018-09-14
  • 打赏
  • 举报
回复
引用 19 楼 ITjavaman 的回复:
单个线程都满载了,你还想多线程更快么- -
既然是批量操作数据库,按目前情况,你的瓶颈应该是数据库连接以及批量提交这方面,而不是你的线程


刚开始怀疑是数据库的使用过于频繁导致,所以做了缓存形式,批量提交,问题是即使十几条数据提交和大量数据提交都是测试情况下不断消耗CPU过程,所以才会100%耗资源
Retank 2018-09-13
  • 打赏
  • 举报
回复

引用 17 楼 ITjavaman 的回复:
[quote=引用 16 楼 Retank 的回复:]
@ITjavaman
你既然有线程池了,那么就不会创建那么多的线程,线程都是由池子创建的,你使用的时候只是从池子里面拿出一条线程,除非你写法有问题



单个线程池测试
ExecutorService qtPool = Executors.newFixedThreadPool(2);

for (int i = 0; i < list.size(); i++) {
qtPool.execute(new Thread(qt));
}

stPool.shutdown();

每个线程执行数据插入到数据库,这也是满载的
ITjavaman 2018-09-12
  • 打赏
  • 举报
回复
引用 16 楼 Retank 的回复:
@ITjavaman
单条线程看不到效果,我为了测试高并发效果,没有时间间隔的创建大量线程造成的CPU满载

你既然有线程池了,那么就不会创建那么多的线程,线程都是由池子创建的,你使用的时候只是从池子里面拿出一条线程,除非你写法有问题
Retank 2018-09-11
  • 打赏
  • 举报
回复
@ITjavaman
单条线程看不到效果,我为了测试高并发效果,没有时间间隔的创建大量线程造成的CPU满载
ITjavaman 2018-09-11
  • 打赏
  • 举报
回复
你有没有用单线程跑过,你单个线程消耗的CPU有多少
如果单个线程消耗的CPU就占了很多的话,那你应该从单个流程上去优化
如果单个线程消耗很少的cpu,但是多线程(N条线程)的话消耗的效率与单个线程所消耗的cpu*N相差很大的话
你再看看是写法问题还是,还是什么地方争抢什么的导致CPU过高
qq_29048885 2018-09-10
  • 打赏
  • 举报
回复
这个不是很懂
Retank 2018-09-10
  • 打赏
  • 举报
回复
@ITjavaman、@haotao99xiao
你提到单例,现在我用非单例的形式做,一样的效果,多了一种方式
Retank 2018-09-10
  • 打赏
  • 举报
回复
@ITjavaman、@haotao99xiao
纠正:是单例缓存类
Retank 2018-09-10
  • 打赏
  • 举报
回复
@ITjavaman、@haotao99xiao
不是是单例,数据库线程池做了20,发现几百万数据也用不完,
缓存并不吃CPU,发现是线程太多耗的CPU资源,有简单的优化思路吗?
qq_43169721 2018-09-10
  • 打赏
  • 举报
回复
e贵妃WF RF RQ GE
haotao99xiao 2018-09-10
  • 打赏
  • 举报
回复
单例?线程池做了?
ITjavaman 2018-09-10
  • 打赏
  • 举报
回复
单例?线程池做了?
Retank 2018-09-09
  • 打赏
  • 举报
回复
用你的这个分布缓存架构测试,和我在项目上写的缓存CPU效果一样,都会占用100%资源,不是缓存占用,而是线程占用了。使用你的架构建议提供一个可以查看当前缓存量的方法,调试时或者使用中控制时方便
verejava 2018-09-09
  • 打赏
  • 举报
回复
Retank 2018-09-08
  • 打赏
  • 举报
回复
给数据运行测试时,CPU直接100%占用,如果在请求线程间加延时,效果又没有那么好,有人解决过吗?
购买提醒:全程代码实战,本系列课程建议有Java开发经验2年以上的学员观看和购买。录制本套教程的初衷,通过从业10年接触过很多的技术开发人员,尤其在面试一些技术人员的时候,发现他们的技术知识更新较慢,很多人渴望接触到高并发系统和一些高级技术架构,为了帮助更多人能够提升自己和接触到这类技术架构,并满足企业的人才需求,利用业余时间我开始录制这套教程。通过录制教程有很多学员给我反馈信息,给了我很大的鼓舞,当然也有吐槽,我想说的是技术是没有边界的,脱离一线业务场景去谈技术,都是耍流氓的。如对我录制的教程内容有建议请及时交流。本套课程历经1年时间研发,案例来源于真实业务场景抽离,由从业10年企业一线架构师实录,没有基础不建议购买。购买后提供企业级多方位指导,通过本套案例可以让你学习目前主流的微服务技术架构和多种企业级高并发和海量数据、高可用、分布式、支付、多语言、前后端分离等技术的综合应用解决方案。在开始本课程前给大家科普几个概念: 高并发是指在比较短的时间内有大量的访问者访问目标系统,系统负载饱和或者过载宕机。 高并发的应用,我们应该都有用过或者见过,比如天猫、京东、拼多多、亚马逊的秒杀抢购还有12306的抢票。我们在体验应用的时候,可能并不会像到这种高并发系统背后的技术实现难度。高并发系统都存在这几种问题,高并发读、高并发写、访问高峰突发性、反馈结果的即时性。在抢购的时候,尤其是抢购火车票的时候,我们经常会疯狂的刷库存,几亿用户产生非常大的高并发读; 通过以上的科普相信大家对课程有一个基本的认知了,本套教程以应用最为广泛的电商系统为标本,给大家构建一个亿级微服务秒杀系统,让大家跟着我的步骤能学习行为背后的原理。本课程采用全新的微服务架构,运用了很多工业界企业解决方案和高级技术,带大家手把手实现一个高性能,高并发,高可用等的亿级微服务秒杀系统,本课程会包含很多高级的内容,比如微服务架构、分布式部署方案、多线程、支付、多语言、全链路性能压力测试等,让大家在实战中学习知识,在实战中不断进步。该课程是一个完整的微服务架构秒杀系统项目代码,案例具有很高的商业价值,大家可以根据自己的业务进行修改,便可以使用。本套课程可以满足世面上绝大多数企业级的业务场景,本课程全部代码可以直接部署企业,普通集群,支撑**并发;集群规模大,支撑亿级并发。本课程包含的技术: IDEA集成开发工具 SpringBoot2.0.2.RELEASE SpringCloudFinchley.RELEASE Thymeleaf(模板引擎技术) 微信支付 支付宝支付 银联支付 分布式数据库Mycat MySQL Druid RabbitMQ 分布式事务 分布式锁 事件驱动 多线程 MyBatis QuartzEhcache Redis Hystrix 单点登陆CAS Nginx Lua Restful AOP技术 性能压力测试Jemter VUE+jQuery+Ajax+NodeJS Python Go语言课程亮点: 1.与企业无缝对接、真实工业界产品 2.主流支付全覆盖(微信、支付宝、银联) 3.前后端分离(主流技术架构) 4.实现高并发请求和实现高可用架构解决方案 5.多语言(Java、Go、Python) 6.亿级微服务秒杀系统(支撑海量数据) 7.大型系统分布式部署方案 8.全链路性能压力测试  9.分布式事务解决方案 10.事件驱动设计解决方案 11.多线程技术的实战应用 12.高并发下的服务降级、限流实战 13.分布式架构师下实现分布式定时调度 14.集成MyBatis实现多数据源路由实战 15.集成Redis缓存实战 16.Eureka注册中心 17.OpenFeign声明式服务调用 18.Hystrix服务熔断降级方式 19.基于Hystrix实现接口降级实战 20.集成SpringCloud实现统一整合方案 21.全程代码实操,提供全部代码和资料 22.提供答疑和提供企业技术方案咨询购买提醒: 我本人在企业从业10年,因为热爱,所以坚持,下一个10年依然会在企业一线服务,因此对于课程中的技术点可以提供全方面的业务场景解决方案。我本人并非培训机构脱离一线业务场景的讲师,从业多年接触过大量的真实业务场景案例,后面会逐步通过教程案例分享我多年的实战经验,送给同行一句话:技术是服务于业务的,脱离一线业务场景就是耍流氓。

58,454

社区成员

发帖
与我相关
我的任务
社区描述
Java Eclipse
社区管理员
  • Eclipse
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧