PHP分布式及大量数据处理问题

controstr 2011-06-23 05:00:51

现在我公司需要做一个微博系统，用户量比较大，要求支持上百万用户同时在线，各们说说是使用什么缓存技术好，有些人建议用C++写后台，有些有建议用memcache做缓存，因为我们这个系统还有一个IM，IM需要和网站做互动，C++写后台是肯定要的，但这个缓存是用memcache还是C++实现呢。

...全文

245 3 打赏收藏转发到动态举报

写回复

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

controstr 2011-06-27

打赏
举报

回复

多谢二位。
我另有一问题

http://topic.csdn.net/u/20110627/18/c1e32f94-5040-4c45-ae00-ad12ffd6d78f.html

seai 2011-06-23

打赏
举报

回复

什么语言不是关键，关键在构建一个多层次的“存储层”，向cpu一样，有一级缓存、二级缓存、三级缓存，你需要充分考虑数据存储于磁盘、DB、MEM，合理组织起来。

后续问题，欢迎随时提问。

骄傲青蛙 2011-06-23

打赏
举报

回复

memcache本来就是C/C++写的，和用C++重做一个有区别吗。

Celery-PHP是基于原生Celery项目的PHP实现，可构建分布式、异步处理的任务队列。它复现了Celery协议，支持多消息中间件，有异步任务、分布式等特性。适用于批量数据处理、定时任务等场景，具有简洁API、完全兼容等特点，是PHP开发者的理想选择。

本文探讨如何利用PHP结合Swoole实现高并发的API网关，解决实时传感数据处理瓶颈。重点包括基于RESTful的路由设计、MQTT-SN/LoRaWAN协议适配、流式解析优化、缓存预取加速响应，并引入限流熔断与分布式追踪提升系统稳定性。

本文围绕PHP队列在订单处理中的应用展开。PHP队列基于消息队列，能高效处理大量数据，支持高并发、低延迟。其应用场景包括实时订单处理、大数据处理和分布式订单处理。文中还介绍了开发环境准备和具体应用步骤，指出其应用前景广阔，能为电商提供稳定数据处理支持。

Flow PHP是PHP生态中先进的强类型、内存高效数据处理框架，支持流式处理与延迟执行。其核心架构包含模块化适配器、Rust集成的Arrow扩展、类型安全管道及生成器驱动引擎。未来路线图聚焦性能优化（Arrow深度集成、内存管理）、多源生态扩展（云服务、Kafka、新数据库）及开发者体验提升（DSL增强、IDE支持）。技术趋势涵盖实时流处理、多语言融合（Rust+Arrow）、云原生部署与AI/ML集成，标志着PHP向现代数据工程演进。

本文介绍了如何使用PHP Promises库应对大数据处理中的并发管理、任务依赖和异常处理等问题。通过非阻塞并发、精细化控制及完善错误机制，提升数据处理效率。文章还分享了一个日志数据分析系统的实战案例，并提供性能优化建议。

4,250

社区成员

4,522

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章