elasticsearch scroll方式查询时scroll_id很长且查询很慢的原因
首页->学习资料->微服务治理->elasticsearch
关键词: 发布时间:2021-01-12 13:33:05 浏览次数:2981
今天做elasticsearch查询时,由于数据量巨大,采用scroll方式查询,结果发现超慢,而且查询返回的数量与实际不一致,打印数据查看,发现scroll_id特别长,类似下面这样(其实只复制了一部分,特殊特殊长),而且查询速度特别慢,有点好奇,最后发现是一个配置没有取到,导致index为空,取到后scroll_id就很短了,且速度快了好多;应该是elasticsearch没有取到这个数据时,就会去库里轮循,所以导致scoll_id特别长(scroll_id中应该一些参数加密生成的),由于要去库里一个个查找匹配的type,导致查询特殊慢;可能正好匹配到了一个同名的type(但不在我们期待的index上),导致查询结果不一致,仅是猜测;
Array ( [index] => tickets(这个没取到导致) [type] => tk_tickets [from] => 0 [size] => 10000 [scroll] => 5m
Array ( [_scroll_id] => DnF1ZXJ5VGhlbkZldGNoliIAAAAA7VnBqBY2YmlZcVNVblJHYTZzRml5N3pQNjBBAAAAAOk3c3EWVGxKeWhldG5TS1dYbF9pRW9lbVJaUQAAAADhTOMmFkJOQTEtZ2I1VFJtM1lPZXZYOU1mTWcAAAAA6TdzcBZUbEp5aGV0blNLV1hsX2lFb2VtUlpRAAAAAB0zCoAWbTVtcDVLcVpTWjJrYjJpb3BSVjZ2ZwAAAADhTOMcFkJOQTEtZ2I1VFJtM1lPZXZYOU1mTWcAAAAA3dBcxhZtV2ZNeGhpclQxeTEyajlOYTBvaEt3AAAAAB0zCoEWbTVtcDVLcVpTWjJrYjJpb3BSVjZ2ZwAAAAAdMwqDFm01bXA1S3FaU1oya2IyaW9wUlY2dmcAAAAAHTMKghZtNW1wNUtxWlNaMmtiMmlvcFJWNnZnAAAAAN3QXMcWbVdmTXhoaXJUMXkxMmo5TmEwb2hLdwAAAAAdMwqEFm01bXA1S3FaU1oya2IyaW9wUlY2dmcAAAAA6TdzcxZUbEp5aGV0blNLV1hsX2lFb2VtUlpRAAAAAOk3c3QWVGxKeWhldG5TS1dYbF9pRW9lbVJaUQAAAADhTOMzFkJOQTEtZ2I1VFJtM1lPZXZYOU1mTWcAAAAA4UzjGBZCTkExLWdiNVRSbTNZT2V2WDlNZk1nAAAAAOFM4z4WQk5BMS1nYjVUUm0zWU9ldlg5TWZNZwAAAADofWjrFlFv
赞:(0)
踩:(0)
- 相关文章
- elasticsearch插入时报错:invalid
- 无法访问虚拟机上的elasticsearch
- elasticsearch批量更新数据
- centos7.4下安装elasticsearch
- php中elasticsearch scroll方式查
- Elasticsearch 实时分布式搜索分析
- Elasticsearch 权威指南(中文版)
- elasticsearch查询实例-模拟数据
- elasticsearch-建立indice(相当于s
- elasticsearch建立mapping-相当于s
- 热门文章
- win7中将文件拷贝到虚拟机linux下
- phpexcel设置行高及列宽,背景颜色,
- rabbitmq无法启动
- intellij idea不显示git push按钮
- php7中使用mongodb的aggregate进行
- centos7.4 64位下swoole安装及配置
- laravel页面静态化的方法
- navicate连接mycat报1184错误
- 单点登录sso原理及php实现方式及de
- devops-jenkins容器为pending状态
- 好评文章
- phpexcel设置行高及列宽,背景颜色,
- php7中使用mongodb的aggregate进行
- intellij idea打开文件所在文件夹
- windows下使用MongoDB Compass Com
- win7中将文件拷贝到虚拟机linux下
- laravel 中悲观锁 & 乐观锁的使用
- 单点登录sso原理及php实现方式及de
- navicate连接mycat报1184错误
- rabbitmq无法启动
- laravel整合dingo/api方法步骤:jwt
- 我的项目
- 【github】www.github.com/hurong241
- 【码云】gitee.com/hu_rong/projects
- 【docker hub】hub.docker.com/repositories/hurong241
- 【packagist】packagist.org/users/hurong241/packages
- 站点信息
- 建站时间:2011年
- 文章数:607篇
- 浏览数:941861