1.客户点怎么上传？每次读取100条数据，发送到平台，平台执行完毕返回状态？
2.平台收到数据存入消息队列，但这样客户点没法知道平台这批数据是否操作成功
-
数据中心和各客户点之间数据上传下发问题，客户点会执行某些操作，生成临时表，需要将这些临时表数据上传平台。
1.客户点怎么上传？每次读取100条数据，发送到平台，平台执行完毕返回状态？
2.平台收到数据存入消息队列，但这样客户点没法知道平台这批数据是否操作成功
展开阅读全文
-
等级
本版专家分：2858勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
-
如果按1，客户点很多个的情况下，并发怎么解决，
按2的话并发没啥问题了，存入消息队列，一条条解决，但这样会不会造成队列元素过多，可能同时很多个点一次性发很多条数据，平台没处理完数据，可能客户以为没成功，还会一直点发送按钮，等待的队列越来越多
-
等级
本版专家分：1430勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
- 黄花 2020年10月 .NET技术大版内专家分月排行榜第二
-
-
选2，可以返回消息的我记得rabbit mq 就可以而且可持久化，但是你的系统设计有问题吧？这客户端多数据操作了还要多并发这系统不少？排队是直接拿排队号不是站着等，参考浏览器下载列表。
-
等级
本版专家分：1430勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
- 黄花 2020年10月 .NET技术大版内专家分月排行榜第二
-
-
选2，rabbit mq 可以返回消息，但是不应该让用户等，完之后在列表显示结果就是。
-
等级
本版专家分：473140勋章
-
-
进士
2018年总版新获得的技术专家分排名前十
2017年 总版技术专家分年内排行榜第十
2013年 总版技术专家分年内排行榜第八
-
-
铜牌
2018年12月 总版技术专家分月排行榜第三
2018年11月 总版技术专家分月排行榜第三
2017年2月 总版技术专家分月排行榜第三
-
-
红花
2019年1月 .NET技术大版内专家分月排行榜第一
2018年12月 .NET技术大版内专家分月排行榜第一
2018年11月 .NET技术大版内专家分月排行榜第一
2018年10月 .NET技术大版内专家分月排行榜第一
2018年9月 .NET技术大版内专家分月排行榜第一
2018年7月 .NET技术大版内专家分月排行榜第一
2018年6月 .NET技术大版内专家分月排行榜第一
2018年1月 .NET技术大版内专家分月排行榜第一
2017年5月 .NET技术大版内专家分月排行榜第一
2017年4月 .NET技术大版内专家分月排行榜第一
2017年3月 .NET技术大版内专家分月排行榜第一
2017年2月 .NET技术大版内专家分月排行榜第一
2016年10月 .NET技术大版内专家分月排行榜第一
2016年8月 .NET技术大版内专家分月排行榜第一
2016年7月 .NET技术大版内专家分月排行榜第一
-
-
黄花
2020年7月 .NET技术大版内专家分月排行榜第二
2019年4月 .NET技术大版内专家分月排行榜第二
2019年3月 .NET技术大版内专家分月排行榜第二
2018年8月 .NET技术大版内专家分月排行榜第二
2018年4月 .NET技术大版内专家分月排行榜第二
2018年3月 .NET技术大版内专家分月排行榜第二
2017年12月 .NET技术大版内专家分月排行榜第二
2017年9月 .NET技术大版内专家分月排行榜第二
2017年7月 .NET技术大版内专家分月排行榜第二
2017年6月 .NET技术大版内专家分月排行榜第二
2016年12月 .NET技术大版内专家分月排行榜第二
2016年9月 .NET技术大版内专家分月排行榜第二
2016年6月 .NET技术大版内专家分月排行榜第二
2016年3月 .NET技术大版内专家分月排行榜第二
2016年1月 .NET技术大版内专家分月排行榜第二
2015年12月 .NET技术大版内专家分月排行榜第二
2015年2月 .NET技术大版内专家分月排行榜第二
2015年1月 .NET技术大版内专家分月排行榜第二
2014年11月 .NET技术大版内专家分月排行榜第二
2014年5月 .NET技术大版内专家分月排行榜第二
2014年4月 .NET技术大版内专家分月排行榜第二
2012年2月 多媒体/设计/Flash/Silverlight 开发大版内专家分月排行榜第二
-
-
你先要说清楚“数据中心”是客户端还是服务器端？这个你们确定了吗？如果首尾尚且部分，研究别的更深入的东西都是百搭。
-
等级
本版专家分：473140勋章
-
-
进士
2018年总版新获得的技术专家分排名前十
2017年 总版技术专家分年内排行榜第十
2013年 总版技术专家分年内排行榜第八
-
-
铜牌
2018年12月 总版技术专家分月排行榜第三
2018年11月 总版技术专家分月排行榜第三
2017年2月 总版技术专家分月排行榜第三
-
-
红花
2019年1月 .NET技术大版内专家分月排行榜第一
2018年12月 .NET技术大版内专家分月排行榜第一
2018年11月 .NET技术大版内专家分月排行榜第一
2018年10月 .NET技术大版内专家分月排行榜第一
2018年9月 .NET技术大版内专家分月排行榜第一
2018年7月 .NET技术大版内专家分月排行榜第一
2018年6月 .NET技术大版内专家分月排行榜第一
2018年1月 .NET技术大版内专家分月排行榜第一
2017年5月 .NET技术大版内专家分月排行榜第一
2017年4月 .NET技术大版内专家分月排行榜第一
2017年3月 .NET技术大版内专家分月排行榜第一
2017年2月 .NET技术大版内专家分月排行榜第一
2016年10月 .NET技术大版内专家分月排行榜第一
2016年8月 .NET技术大版内专家分月排行榜第一
2016年7月 .NET技术大版内专家分月排行榜第一
-
-
黄花
2020年7月 .NET技术大版内专家分月排行榜第二
2019年4月 .NET技术大版内专家分月排行榜第二
2019年3月 .NET技术大版内专家分月排行榜第二
2018年8月 .NET技术大版内专家分月排行榜第二
2018年4月 .NET技术大版内专家分月排行榜第二
2018年3月 .NET技术大版内专家分月排行榜第二
2017年12月 .NET技术大版内专家分月排行榜第二
2017年9月 .NET技术大版内专家分月排行榜第二
2017年7月 .NET技术大版内专家分月排行榜第二
2017年6月 .NET技术大版内专家分月排行榜第二
2016年12月 .NET技术大版内专家分月排行榜第二
2016年9月 .NET技术大版内专家分月排行榜第二
2016年6月 .NET技术大版内专家分月排行榜第二
2016年3月 .NET技术大版内专家分月排行榜第二
2016年1月 .NET技术大版内专家分月排行榜第二
2015年12月 .NET技术大版内专家分月排行榜第二
2015年2月 .NET技术大版内专家分月排行榜第二
2015年1月 .NET技术大版内专家分月排行榜第二
2014年11月 .NET技术大版内专家分月排行榜第二
2014年5月 .NET技术大版内专家分月排行榜第二
2014年4月 .NET技术大版内专家分月排行榜第二
2012年2月 多媒体/设计/Flash/Silverlight 开发大版内专家分月排行榜第二
-
-
“大数据时代”实际上往往编程设计是很 low 的。原本是要设计一个企业级的 Server，然后自己的 Client 来访问自己的 Server。可是有许多初学者只学过什么“增删改查”，或者只学过什么“消息队列”，于是满脑子就只有数据库系统的 ADO.NET 驱动或者 Redis、MQ 之类的编程概念。
其实说白了，许多公司没有设计 c/s 系统的能力，而是使用各种各样的开源服务来“堆”系统，用各种简单的服务系统的客户端驱动调用方法来回避 Server 设计开发。真的能回避得了吗？作为软件公司的老板或者技术负责人，碰到这种情况会非常后悔没有招聘到“服务器开发人员”而把有限的薪水给了太多的（既不能专业开发前端框架的）处于中间夹层的开发者。
真正的服务器开发是基于通讯协议，在协议设计中包含业务对象，并且实现服务器协议解析、内部数据处理过程。而不是调一大堆开源服务的增删改查消息的客户端语句。
-
等级
本版专家分：473140勋章
-
-
进士
2018年总版新获得的技术专家分排名前十
2017年 总版技术专家分年内排行榜第十
2013年 总版技术专家分年内排行榜第八
-
-
铜牌
2018年12月 总版技术专家分月排行榜第三
2018年11月 总版技术专家分月排行榜第三
2017年2月 总版技术专家分月排行榜第三
-
-
红花
2019年1月 .NET技术大版内专家分月排行榜第一
2018年12月 .NET技术大版内专家分月排行榜第一
2018年11月 .NET技术大版内专家分月排行榜第一
2018年10月 .NET技术大版内专家分月排行榜第一
2018年9月 .NET技术大版内专家分月排行榜第一
2018年7月 .NET技术大版内专家分月排行榜第一
2018年6月 .NET技术大版内专家分月排行榜第一
2018年1月 .NET技术大版内专家分月排行榜第一
2017年5月 .NET技术大版内专家分月排行榜第一
2017年4月 .NET技术大版内专家分月排行榜第一
2017年3月 .NET技术大版内专家分月排行榜第一
2017年2月 .NET技术大版内专家分月排行榜第一
2016年10月 .NET技术大版内专家分月排行榜第一
2016年8月 .NET技术大版内专家分月排行榜第一
2016年7月 .NET技术大版内专家分月排行榜第一
-
-
黄花
2020年7月 .NET技术大版内专家分月排行榜第二
2019年4月 .NET技术大版内专家分月排行榜第二
2019年3月 .NET技术大版内专家分月排行榜第二
2018年8月 .NET技术大版内专家分月排行榜第二
2018年4月 .NET技术大版内专家分月排行榜第二
2018年3月 .NET技术大版内专家分月排行榜第二
2017年12月 .NET技术大版内专家分月排行榜第二
2017年9月 .NET技术大版内专家分月排行榜第二
2017年7月 .NET技术大版内专家分月排行榜第二
2017年6月 .NET技术大版内专家分月排行榜第二
2016年12月 .NET技术大版内专家分月排行榜第二
2016年9月 .NET技术大版内专家分月排行榜第二
2016年6月 .NET技术大版内专家分月排行榜第二
2016年3月 .NET技术大版内专家分月排行榜第二
2016年1月 .NET技术大版内专家分月排行榜第二
2015年12月 .NET技术大版内专家分月排行榜第二
2015年2月 .NET技术大版内专家分月排行榜第二
2015年1月 .NET技术大版内专家分月排行榜第二
2014年11月 .NET技术大版内专家分月排行榜第二
2014年5月 .NET技术大版内专家分月排行榜第二
2014年4月 .NET技术大版内专家分月排行榜第二
2012年2月 多媒体/设计/Flash/Silverlight 开发大版内专家分月排行榜第二
-
-
大数据时代，一个公司就要设计自己的“实时数据库”系统，来接收高并发大数据，来采集高并发大数据，将信息点的事件高并发地进行订阅和通知给相关的远程客户端应用。而许多公司用专业开发人员的钱，给了一些只学过简单的 winform、asp.net 页面初步编程的人，通过调用各种开源“服务”，缓解技术难题。这里的关键在于“没有服务器端设计开发技术”，实际上是靠调用各种服务的 c 端驱动，来对客户欺骗说自己是做大数据服务器开发的。那么结果就是用户等了几年以为能将传统的过时的系统更新换代到大数据处理系统，最后发现被坑了。
-
等级
本版专家分：2858勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
-
那我客户点上传平台，传完了要是平台执行失败怎么操作？平台消息队列订阅者执行成功或者失败再回调客户点的接口？告诉你成功或者失败？要是这期间队列很多，一直等待，客户点一直在重发数据怎么做？
-
等级
本版专家分：2858勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
-
数据中心是服务器端
-
等级
本版专家分：473140勋章
-
-
进士
2018年总版新获得的技术专家分排名前十
2017年 总版技术专家分年内排行榜第十
2013年 总版技术专家分年内排行榜第八
-
-
铜牌
2018年12月 总版技术专家分月排行榜第三
2018年11月 总版技术专家分月排行榜第三
2017年2月 总版技术专家分月排行榜第三
-
-
红花
2019年1月 .NET技术大版内专家分月排行榜第一
2018年12月 .NET技术大版内专家分月排行榜第一
2018年11月 .NET技术大版内专家分月排行榜第一
2018年10月 .NET技术大版内专家分月排行榜第一
2018年9月 .NET技术大版内专家分月排行榜第一
2018年7月 .NET技术大版内专家分月排行榜第一
2018年6月 .NET技术大版内专家分月排行榜第一
2018年1月 .NET技术大版内专家分月排行榜第一
2017年5月 .NET技术大版内专家分月排行榜第一
2017年4月 .NET技术大版内专家分月排行榜第一
2017年3月 .NET技术大版内专家分月排行榜第一
2017年2月 .NET技术大版内专家分月排行榜第一
2016年10月 .NET技术大版内专家分月排行榜第一
2016年8月 .NET技术大版内专家分月排行榜第一
2016年7月 .NET技术大版内专家分月排行榜第一
-
-
黄花
2020年7月 .NET技术大版内专家分月排行榜第二
2019年4月 .NET技术大版内专家分月排行榜第二
2019年3月 .NET技术大版内专家分月排行榜第二
2018年8月 .NET技术大版内专家分月排行榜第二
2018年4月 .NET技术大版内专家分月排行榜第二
2018年3月 .NET技术大版内专家分月排行榜第二
2017年12月 .NET技术大版内专家分月排行榜第二
2017年9月 .NET技术大版内专家分月排行榜第二
2017年7月 .NET技术大版内专家分月排行榜第二
2017年6月 .NET技术大版内专家分月排行榜第二
2016年12月 .NET技术大版内专家分月排行榜第二
2016年9月 .NET技术大版内专家分月排行榜第二
2016年6月 .NET技术大版内专家分月排行榜第二
2016年3月 .NET技术大版内专家分月排行榜第二
2016年1月 .NET技术大版内专家分月排行榜第二
2015年12月 .NET技术大版内专家分月排行榜第二
2015年2月 .NET技术大版内专家分月排行榜第二
2015年1月 .NET技术大版内专家分月排行榜第二
2014年11月 .NET技术大版内专家分月排行榜第二
2014年5月 .NET技术大版内专家分月排行榜第二
2014年4月 .NET技术大版内专家分月排行榜第二
2012年2月 多媒体/设计/Flash/Silverlight 开发大版内专家分月排行榜第二
-
-
你自己细品。实际上你设计开发一个“数据中心”，它自然就是消息总线、就是数据清洗总线、就是计算总线、就是业务对象网关。就好像一个飞机驾驶员不去开飞机，而是请空姐来开飞机，然后纠结说“因为自己的性能不高、动作频率不够快、达不到要求”，这样的纠结是有原因的，也不太合适。
-
等级
本版专家分：0勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
- GitHub 绑定GitHub第三方账户获取
-
-
解决方案, 首先你客户端把需要上传的数据全部读取出来组合为一个数据包,然后取这一组数据的MD5,服务端通过数据的MD5来确定是那一组数据,这样就可以解决并发接收的问题, 还有数据包的顺序, 为同一组数据增加一个包顺序的编号,接收完毕后服务器按照MD5和包顺序编号再合并数据,然后再检测接收到的数据MD5确定这个包是否为完整的就OK了, 说白了你用成熟的Sokcet通讯框架来做这些都不是问题, 可以去了解下 HPSokcet
- 基于文件的离线数据同步方案
一种基于文件的离线APP数据同步方案
- 分布式数据库中数据同步
该方案中描述了一个典型的分布式数据库系统，主要由几个部分组成: 数据中心、远程数据库、远程数据库与数据中心之间的数据交换。 <br />从运行状态来看，分布式数据库系统又可分为“常连接”和“偶连接”两大类...
- 数据同步
上述方案中描述了一个典型的分布式数据库系统，主要由几个部分组成: 数据中心、远程数据库、远程数据库与数据中心之间的数据交换。 从运行状态来看，分布式数据库系统又可分为“常连接”和“偶连接”两大类。...
- 基于文件的离线数据同步方案
产品此前的数据备份方案，存在不少问题，所以需要设计一个新的方案。本文总结一下新旧方案的优劣 首先APP是一个支持离线的应用。本地数据保存在sqlite，在离线环境下，在本地数据库里读写记录，在有网络的时候，再...
- 数据同步
上述方案中描述了一个典型的分布式数据库系统，主要由几个部分组成: 数据中心、远程数据库、远程数据库与数据中心之间的数据交换。 从运行状态来看，分布式数据库系统又可分为“常连接”和“偶连接”两大类。...
- OneNET物联网云平台HTTP数据流上传与下发，使用Fiddler调试开关应用，stm32 esp8266物联网家居远程开关
可实现各种传感器和智能硬件的快速接入，提供丰富的API和应用模板以支撑各类行业应用和智能硬件的开发，有效降低物联网应用开发和部署成本，满足物联网领域设备连接、协议适配、数据存储、数据安全以及大数据分析等...
- 【面经】腾讯U3d面试面经 帧同步方向 （一）帧同步如何解决不同步的问题？
解决不同步问题首先考虑什么是不同步的问题，为什么会出现不同步的情况。 那么什么是不同步的问题呢？帧同步是由客户端计算，发送命令给服务器，服务器转发命令达到两边客户端显示一致。服务器是不知道具体逻辑的，...
- 分布式数据库中数据同步 简介
上述方案中描述了一个典型的分布式数据库系统，主要由几个部分组成: 数据中心、远程数据库、远程数据库与数据中心之间的数据交换。 从运行状态来看，分布式数据库系统又可分为“常连接”和“偶连接”两大类。...
- 基于文件的离线数据同步方案
产品此前的数据备份方案，存在不少问题，所以需要设计一个新的方案。本文总结一下新旧方案的优劣 首先APP是一个支持离线的应用。本地数据保存在sqlite，在离线环境下，在本地数据库里读写记录，在有网络的时候，...
- 一种客户端同步server数据的方案
一种客户端同步server数据的方案
- JAVA数据库同步系统2.0总结
原先V1.0的系统，是根据一个旧的系统修改出来的，公司的不少同事对我说是整了好几年，整烦了很多人，开始还在怀疑自己能否做好这个东西，后来果不出所料，因为原系统本来就有很多设计不合理的地方，又没有文档，改...
- 数据同步平台——FTP
FTP服务器： 主要作用就是让用户连接上一个远程计算机，查看远程计算机上的文件，并可实现将文件在本机和远程计算机之间的传递。简言之，在两台电脑都运行着FTP服务程序时，通过FTP协议远程操作另一台pc机，对其...
- 基于Lua脚本解决实时数据处理流程中的关键问题
摘要 在处理实时数据的过程中需要缓存的参与，由于在更新实时数据时并发处理的特点，因此在更新实时数据时经常产生新老数据相互覆盖...实时数据处理过程中遇到的问题 在处理实时数据的过程中，经常使用Redis存取
- 一种客户端同步server数据的方案
客户端A不定时地把本地数据同步到server上，然后另一个客户端B（app）从server把数据同步下来，汇总展示 客户端A数据结构 原始的数据（来自客户端A），每条都有create_time和modify_time，用于表示这条记录的创建...
- 帧同步总结
1.为了方便处理，所有的逻辑帧都是等服务器返回后执行，暂时不做预测等处理。 客户端的每次操作不会立即生效，而是...帧锁定同步（Lock step sync） 1.客户端定时（比如50毫秒）上传操作控制信息，大家都流畅的...
- 数据同步
上述方案中描述了一个典型的分布式数据库系统，主要由几个部分组成: 数据中心、远程数据库、远程数据库与数据中心之间的数据交换。 从运行状态来看，分布式数据库系统又可分为“常连接”和“偶连接”两大类。...
- 游戏后台状态同步与帧同步
最近开始学习一下游戏后台的一些知识，一直很好奇多个玩家之间的数据是如何同步的，查了一下，目前使用的比较多的是状态同步和帧同步。状态同步同步的是游戏中的各种状态。一般的流程是客户端上传操作到服务器，...
- 分布式环境下对部分热数据（如redis热key，热请求）进行探测，并对探测结果及时同步到各个client实例的JVM...
突发性的无法预先感知的热点数据请求，或者有阵发性明显热点数据的。 譬如突然大量请求都命中了redis的某个分片，造成该redis卡顿，影响其他请求。热key特性如 goodsId=100，突发1万请求该key。 譬如突然大量同一...
- 多人游戏对战技术（坦克大战、状态同步）
用状态同步的方式实现一个坦克大战的小游戏，这也是一次全新的尝试，从游戏的效果来看，在正常的网络速度下效果符合预期。这里跟大家分享下游戏客户端中用到的关键技术点。 一、 同步方式的选择，状态同步or 帧...
- 状态同步和桢同步的区别
对于联网游戏来讲，同步的方式主要分为两种，状态同步、帧同步。 状态同步： 顾名思义，是指的将其他玩家的状态行为同步的方式，一帮情况下AI逻辑，技能逻辑，战斗计算都由服务器运算，只是将运算的结果同步给客户端...
- Android 客户端与服务器端进行数据交互Demo（包含服务器端和客户端）
Android 客户端与服务器端进行数据交互Demo（包含服务器端和客户端） 实现了基本的数据交互及验证
- 帧同步
帧同步技术是早期RTS游戏常用的一种同步技术，本篇文章要给大家介绍的是RTX游戏中帧同步实现，帧同步是一种前后端数据同步的方式，一般应用于对实时性要求很高的网络游戏，想要了解更多帧同步的知识，继续往下看。
- 帧同步和状态同步
帧同步和状态同步去英雄互娱面试突然说到了对游戏中的网络实现问题，面试官告诉我两个名词：帧同步和状态同步 小白并不懂所以开贴记录下来 帧同步： 帧同步，根据wiki百科的定义是，一种对同步源进行像素级同步...
- 状态同步与帧同步
现代多人游戏中，多个客户端之间的通讯大多以同步多方状态为主要目标，为了实现这一目标，主要有两个技术方向： 状态同步 帧同步 状态同步 状态同步简单来说就是同步游戏中的各种状态，当客户端发送游戏动作到服务器...
- 帧同步原理
同步问题的本质是一致性的问题，在同一局多人游戏的过程中，玩家A看到玩家B的状态，应该跟玩家B自身看到自己的状态相一致。延迟是造成不一致的本质原因，假设理想情况下双方的网络时延都为0，那两者应该是同步的，...
- 如何设计实时数据平台（技术篇）
导读：实时数据平台（RTDP，Real-time Data Platform）是一个重要且常见的大数据基础设施平台。在上篇（设计篇）中，我们从现代数仓架构角度和典型数据处理角度介绍了RTDP，并探讨了RTDP的整体设计架构。本文作为下...
- 游戏同步方案——帧同步
游戏同步方案——帧同步帧同步（Lockstep）和状态同步（State Synchronization）状态同步帧同步合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表...
- 游戏帧同步的流程与实现
帧同步的逻辑数据同步 帧同步之跳帧处理 现代多人游戏中，多个客户端之间的通讯大多以同步多方状态为主要目标，为了实现这一目标，主要有两个技术方向： 状态同步 帧同步 状态同步 状态同步简单来说就是同步...
- 还没弄懂分布式场景下数据一致性问题？一文教你轻松解决！
目前分布式事务问题是怎么解决的 行业中有什么解决方案 这些解决方案分别有什么优缺点 别人是怎么做的 我们可以怎么来做 此次分享的缘由 支付重构 考虑支付重构的时候，自然想到原本属于一个本地事务中的处理，现在...
- 【Unity】网络同步方案 帧同步与状态同步
帧同步是什么 所谓帧同步（lockstep），其实是同步操作，确保两个客户端逻辑一致，然后服务器接收每个客户端操作（cmd）， 然后再下发下去，相同的逻辑，相同的操作，便会播放（DoAction）相同的结果。 如何...