Java搭建一个高性能的数据采集中间件

少主无翼 2014-12-04 10:04:03

如题，想利用Java搭建一个数据采集中间件，有一定处理能力要求。
主要业务是接收客户端发送的数据，然后插入数据库，中间可能会有一些简单的业务逻辑，但是主要时间消耗还是在持久化数据库。想问问大家有没有好的架构，最好全是Java的架构。谢谢啦

...全文

953 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

xf 2015-11-09

打赏
举报

回复

flume + kafka +mysql

本文介绍了Java开发中常用的中间件。中间件位于操作系统和应用程序之间，能协调服务。消息队列中间件如RabbitMQ、Kafka；数据库中间件有MySQL Proxy、ShardingSphere等；服务治理中间件包括Spring Cloud、Dubbo；缓存中间件有Redis、Ehcache。合理使用中间件可提升系统性能。

本文详细介绍了中间件的概念、作用以及常见类型，包括Web服务器中间件、数据库中间件、消息中间件、缓存、应用服务器、事务、安全、日志和监控等，强调了它们在现代Web应用程序中的重要性及应用场景。

本文介绍了Java常用中间件，中间件位于操作系统和应用程序间，能协调服务。常见的有消息队列中间件（RabbitMQ、Apache Kafka）、数据库中间件（MySQL Proxy、Hibernate）、服务治理中间件（Spring Cloud、Dubbo）、缓存中间件（Redis、Ehcache），合理使用可提升系统性能。

本文介绍了高性能消息中间件NATS，包括它的特点、发布订阅、请求响应模型、队列订阅、NATS与Spring的集成以及NATS Streaming的使用。NATS以其轻量级、高性能和简单的 Publish/Subscribe 模型在分布式系统中得到应用，文中通过Java代码示例展示了如何使用NATS进行消息传递。

本文介绍了Java生态中常见的中间件类型，包括通信、消息队列、缓存、数据访问、服务治理、分布式事务和任务调度中间件，并列举了相关技术。同时分析了Redisson是否属于中间件，指出它并非独立运行的服务，而是用于操作Redis的Java客户端工具。

高性能WEB开发

25,980

社区成员

4,366

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章