Elasticsearch 索引更新完成前查询返回旧数据

如何解决Elasticsearch 索引更新完成前查询返回旧数据

我正在使用带有选项的 searchkick gem：

 searchkick callbacks: :async

有一种情况，我删除了一条记录，客户端立即调用索引端点来列出所有记录。但是由于ES索引还没有被后台作业更新，所以会得到旧数据。

我正在寻找有关如何解决此问题的想法。有没有一种廉价的方法来检查索引是否正在更新？

解决方法

发生这种情况的原因是索引的 refresh_interval 属性。如果没有明确设置，它的默认值为 1（我假设是你的情况）。

来自文档：

默认情况下，Elasticsearch 每秒都会定期刷新索引，但仅限于在过去 30 秒内收到一个或多个搜索请求的索引。

解决方案 1

您可以使用 Elasticsearch 的 refresh 参数来解决您的问题，但风险自负。我解决了一个类似的问题 here。

curl -X PUT "localhost:9200/test/_doc/1?refresh&pretty" -H 'Content-Type: application/json' -d'
{"test": "test"}
'
curl -X PUT "localhost:9200/test/_doc/2?refresh=true&pretty" -H 'Content-Type: application/json' -d'
{"test": "test"}
'

解决方案 2

支持显式刷新索引。

curl -X POST "localhost:9200/my-index-000001/_refresh?pretty"

注意：上述解决方案并不便宜，实际上是昂贵的，如果索引中有大量文档，可能会导致性能问题。

解决方案 3

（如果您的客户端和 ES 之间有后端和 RDS 层） 收到 ES 的响应后，从最终响应中删除 RDS 中不存在的条目。