如何解决为什么 ElasticSearch 请求在 10.000 个文档后失败?
我们使用 ElasticSearch.NET / nesT 来查询 ElasticSearch 配置。计划是分批获取 1000 个文档并在获取接下来的 1000 个文档之前处理它们
但是处理10批后总是失败
ELK Search Failed Invalid nesT response built from a unsuccessful (500)
如果我们将批量大小更改为 10,000,它将在 1 个批次后失败 批量大小为 100 时,它会在 100 个批次后失败 失败总是在 10.000 个文档之后
代码看起来像这样
private void ProcessRequest(SearchRequest request)
{
request.Size = 1000;
for (request.From = 0; request.From < 1_000_000; request.From += request.Size)
{
Console.WriteLine(request.From);
var responses = _client.Search<GroupStaticElkDocument>(request);
foreach (var response in responses)
_requestCounter.Add(response.ToRequest());
}
}
解决方法
也许你应该尝试分页/滚动
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。