为什么我实测mongodb分片集群在宕机的情况下丢数据？

qq_28576159 2017-08-21 05:53:11

我们通过mongodb的API用自己写的java程序进行单线程的插入，插入40w条数据，每次插入2000条返回一个消耗时间，期间陆续宕掉3个分片的3个primary（不同分片），插入依然继续，最后发现数据总量少了6w。
猜想1是因为我使用了kill -9 mongod的pid 才使得其掉数据。

...全文

633 3 打赏收藏转发到动态举报

写回复

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

Eillot_sun 2017-08-23

打赏
举报

回复

引用 2 楼 rucypli 的回复:

可以看java的日志

请问是什么日志？ spring data mongodb 的日志？

rucypli 2017-08-21

打赏
举报

回复

可以看java的日志

Eillot_sun 2017-08-21

打赏
举报

回复

但是我开启了journal日志了啊？不应该丢数据啊？

redis集群与分片（1）-redis服务器集群、客户端分片下面是来自知乎大神的一段说明，个人觉得非常清晰，就收藏了。为什么集群？通常，为了提高网站响应速度，总是把热点数据保存在内存中而不是直接从后端数据库中读取。Redis是一个很好的Cache工具。大型网站应用，热点数据量往往巨大，几十G上百G是很正常的事儿，在这种情况下，如何正确架构redis呢？首先，无论...

tigase8集群化搭建按官方文档来看，是很容易整的，但实际上，坑不少。摸索了好几天终于把tigase8集群化搞出来了。主要参考官方文档来安装：集群配置。

随着MongoDB在国内的推广，越来越多的开发人员开始使用MongoDB，但是由于缺乏培训和指导，很多人不清楚MongoDB在建模、复制集以及分片等方面的使用原则和技巧。在实际工作中踩到了很多的坑。我由于工作的关系，需要使用MongoDB进行海量地图数据的存储和快速查询。通过翻阅Mongodb官方手册，跟官方工程师近距离请教，自己实践验证，我总结了一些MongoDB的使用经验，现在分享给大家，希望对

为什么集群？通常，为了提高网站响应速度，总是把热点数据保存在内存中而不是直接从后端数据库中读取。Redis是一个很好的Cache工具。大型网站应用，热点数据量往往巨大，几十G上百G是很正常的事儿，在这种情况下，如何正确架构Redis呢？首先，无论我们是使用自己的物理主机，还是使用云服务主机，内存资源往往是有限制的，scale up不是一个好办法，我们需要scale out横向可伸缩扩展，这需要由多...

下面是来自知乎大神的一段说明，个人觉得非常清晰，就收藏了。为什么集群？通常，为了提高网站响应速度，总是把热点数据保存在内存中而不是直接从后端数据库中读取。Redis是一个很好的Cache工具。大型网站应用，热点数据量往往巨大，几十G上百G是很正常的事儿，在这种情况下，如何正确架构Redis呢？首先，无论我们是使用自己的物理主机，还是使用云服务主机，内存资源往往是有限制的，s

1,746

社区成员

1,464

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章