ES相关问题备忘录

最新推荐文章于 2024-11-15 11:07:46 发布

原创最新推荐文章于 2024-11-15 11:07:46 发布 · 430 阅读

0 ·

本内容遵循CC 4.0 BY-SA版权协议

标签

#elasticsearch

Java 专栏收录该内容

9 篇文章

订阅专栏

本文档记录了在学习Elasticsearch过程中遇到的问题及解决方案，主要涉及查询命令如CATAPI、INDEXAPI、SEARCHAPI，以及设置调整。当查询结果超过默认10000条时，可通过scroll或调整`index.max_result_window`设置。对于聚合操作，若超过默认10000个桶，需修改`search.max_buckets`集群级别设置。这些调整有助于高效处理大量数据和复杂聚合需求。

ES备忘录

学习ES途中，记录相关问题，获取成长积累
ES官方文档

命令相关

设置相关

最大返回数量问题
ES 默认返回10000 条数据，超过10000条，要么使用scroll 进行查询，要么设置最大返回值，否则报如下错误

“reason”: “Result window is too large, from + size must be less than or equal to: [10000] but was [10001]. See the scroll api for a more efficient way to request large data sets. This limit can be set by changing the [index.max_result_window] index level setting.”

设置最大数量可以按照如下方法进行调试

/indexName/_settings
{“max_result_window”:“1000000000”}

最大聚合问题
ES针对聚合做了性能优化，默认不允许聚合数据过大，如果聚合体返回数据过大，返回如下错误

{“error”:{“root_cause”:[{“type”:“too_many_buckets_exception”,“reason”:“Trying to create too many buckets. Must be less than or equal to: [10000] but was [10001]. This limit can be set by changing the [search.max_buckets] cluster level setting.”,“max_buckets”:10000}],“type”:“search_phase_execution_exception”,“reason”:“all shards failed”,“phase”:“query”,“grouped”:true,“failed_shards”:[{“shard”:0,“index”:“recommend”,“node”:“FJazr4BeSqGp5x8hS0UDxw”,“reason”:{“type”:“too_many_buckets_exception”,“reason”:“Trying to create too many buckets. Must be less than or equal to: [10000] but was [10001]. This limit can be set by changing the [search.max_buckets] cluster level setting.”,“max_buckets”:10000}}]},“status”:503}

此时可以通过错误中的提示，进行对应的参数设置