elasticsearch scroll方式查询时scroll_id很长且查询很慢的原因
首页->学习资料->微服务治理->elasticsearch 关键词: 发布时间:2021-01-12 13:33:05 浏览次数:2981

今天做elasticsearch查询时,由于数据量巨大,采用scroll方式查询,结果发现超慢,而且查询返回的数量与实际不一致,打印数据查看,发现scroll_id特别长,类似下面这样(其实只复制了一部分,特殊特殊长),而且查询速度特别慢,有点好奇,最后发现是一个配置没有取到,导致index为空,取到后scroll_id就很短了,且速度快了好多;应该是elasticsearch没有取到这个数据时,就会去库里轮循,所以导致scoll_id特别长(scroll_id中应该一些参数加密生成的),由于要去库里一个个查找匹配的type,导致查询特殊慢;可能正好匹配到了一个同名的type(但不在我们期待的index上),导致查询结果不一致,仅是猜测;

Array
(
    [index] => tickets(这个没取到导致)
    [type] => tk_tickets
    [from] => 0
    [size] => 10000
    [scroll] => 5m
Array
(
    [_scroll_id] => DnF1ZXJ5VGhlbkZldGNoliIAAAAA7VnBqBY2YmlZcVNVblJHYTZzRml5N3pQNjBBAAAAAOk3c3EWVGxKeWhldG5TS1dYbF9pRW9lbVJaUQAAAADhTOMmFkJOQTEtZ2I1VFJtM1lPZXZYOU1mTWcAAAAA6TdzcBZUbEp5aGV0blNLV1hsX2lFb2VtUlpRAAAAAB0zCoAWbTVtcDVLcVpTWjJrYjJpb3BSVjZ2ZwAAAADhTOMcFkJOQTEtZ2I1VFJtM1lPZXZYOU1mTWcAAAAA3dBcxhZtV2ZNeGhpclQxeTEyajlOYTBvaEt3AAAAAB0zCoEWbTVtcDVLcVpTWjJrYjJpb3BSVjZ2ZwAAAAAdMwqDFm01bXA1S3FaU1oya2IyaW9wUlY2dmcAAAAAHTMKghZtNW1wNUtxWlNaMmtiMmlvcFJWNnZnAAAAAN3QXMcWbVdmTXhoaXJUMXkxMmo5TmEwb2hLdwAAAAAdMwqEFm01bXA1S3FaU1oya2IyaW9wUlY2dmcAAAAA6TdzcxZUbEp5aGV0blNLV1hsX2lFb2VtUlpRAAAAAOk3c3QWVGxKeWhldG5TS1dYbF9pRW9lbVJaUQAAAADhTOMzFkJOQTEtZ2I1VFJtM1lPZXZYOU1mTWcAAAAA4UzjGBZCTkExLWdiNVRSbTNZT2V2WDlNZk1nAAAAAOFM4z4WQk5BMS1nYjVUUm0zWU9ldlg5TWZNZwAAAADofWjrFlFv


赞:(0)
踩:(0)
相关文章
elasticsearch插入时报错:invalid
无法访问虚拟机上的elasticsearch
elasticsearch批量更新数据
centos7.4下安装elasticsearch
php中elasticsearch scroll方式查
Elasticsearch 实时分布式搜索分析
Elasticsearch 权威指南(中文版)
elasticsearch查询实例-模拟数据
elasticsearch-建立indice(相当于s
elasticsearch建立mapping-相当于s
热门文章
win7中将文件拷贝到虚拟机linux下
phpexcel设置行高及列宽,背景颜色,
rabbitmq无法启动
intellij idea不显示git push按钮
php7中使用mongodb的aggregate进行
centos7.4 64位下swoole安装及配置
laravel页面静态化的方法
navicate连接mycat报1184错误
单点登录sso原理及php实现方式及de
devops-jenkins容器为pending状态
好评文章
phpexcel设置行高及列宽,背景颜色,
php7中使用mongodb的aggregate进行
intellij idea打开文件所在文件夹
windows下使用MongoDB Compass Com
win7中将文件拷贝到虚拟机linux下
laravel 中悲观锁 & 乐观锁的使用
单点登录sso原理及php实现方式及de
navicate连接mycat报1184错误
rabbitmq无法启动
laravel整合dingo/api方法步骤:jwt
标签
rabbitmq mysql备份 elasticsearch golang swoole
我的项目
【github】www.github.com/hurong241
【码云】gitee.com/hu_rong/projects
【docker hub】hub.docker.com/repositories/hurong241
【packagist】packagist.org/users/hurong241/packages
站点信息
建站时间:2011年
文章数:607篇
浏览数:941861
粤ICP备18028092号-1  微信:hurong241