社区
Java EE
帖子详情
用java向elasticsearch导入数据越来越慢
方元之外
2017-09-18 04:33:01
大概100G数据。elasticsearch是单机版,默认配置。
我只分析数据不导入,速度不受影响,初步排除代码问题。
数据字段有点多,160个。
刚开始导入的时候每秒大概有2000条。
往后面导入平均时间越来越慢。每秒几百条。
初步判断是es造成的瓶颈。
可是却不知道怎么提高速度?修改配置吗?只能是单击的,不能添加集群。
...全文
514
回复
打赏
收藏
用java向elasticsearch导入数据越来越慢
大概100G数据。elasticsearch是单机版,默认配置。 我只分析数据不导入,速度不受影响,初步排除代码问题。 数据字段有点多,160个。 刚开始导入的时候每秒大概有2000条。 往后面导入平均时间越来越慢。每秒几百条。 初步判断是es造成的瓶颈。 可是却不知道怎么提高速度?修改配置吗?只能是单击的,不能添加集群。
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
ES与大
数据
平台集成资料
在现代大
数据
处理领域,
Elasticsearch
(简称ES)与大
数据
平台的集成变得
越来越
重要,尤其在结合Spark等处理引擎时,能实现高效的
数据
检索、分析和可视化。本资料集主要探讨了如何将
Elasticsearch
与大
数据
平台进行...
Spring Boot整合
ElasticSearch
和Mysql 附案例源码.docx
-
数据
抽取与转换:使用工具或自定义逻辑从MySQL
数据
库中读取
数据
,并转换为
ElasticSearch
支持的格式。 - 批量
导入
:利用
ElasticSearch
的批量索引功能提高
导入
效率。 - 监听机制:实现实时更新机制,确保
数据
的...
大
数据
分系统设计方案.docx
全文检索服务(
Elasticsearch
)是用
Java
开发的,并作为 Apache 许可条款下的开放源码发布,是当前流行的搜索引擎。设计用于云计算中,能够达到实时搜索、稳定、可靠、快速且安装使用方便。 10. 实时
数据
分发服务...
ELK整体解决方案实施步骤
1. **
导入
GPG Key**:通过下面的命令
导入
Elasticsearch
的GPG key。 ```bash [root@localhost ~]# rpm --import https://artifacts.elastic.co/GPG-KEY-
elasticsearch
``` 2. **添加yum仓库**:编辑 `/etc/yum....
logstash-7.10.2 docker镜像压缩包
Logstash负责
数据
的收集和处理,
Elasticsearch
负责
数据
的存储和检索,而Kibana则负责
数据
的可视化呈现。在ELK栈的使用过程中,需要确保各个组件之间的通信和
数据
流转正常。 #### 15. Logstash的性能优化 在处理大量...
Java EE
67,550
社区成员
225,863
社区内容
发帖
与我相关
我的任务
Java EE
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器,保护我们的业务核心组件(中间件),以延续它的生命力,而不是依赖J2SE/J2EE版本。
复制链接
扫一扫
分享
社区描述
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器,保护我们的业务核心组件(中间件),以延续它的生命力,而不是依赖J2SE/J2EE版本。
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章