如何解决选择 () 中有许多项 \ ID 超时的地方
我有一个节点 JS 脚本,它处理大量记录并将其与数据库(sql Server)中的现有记录进行比较 NodeJS 动态构造查询。 它从外部来源获取数据并将其与我的数据库进行比较。 例子: 我从外部来源获取了 1000 条记录,假设所有 ID 现在都在名为“ar”的数组中。 所以我生成了一个查询:
select from my_table where ID in ('--list of all IDs from ar--')
当它是 1k、2k 和高达 10k 时,一切都很好。 但是当它开始增加时,查询开始超时。
所以我应用了某种分页机制,将数组拆分为固定大小并分块迭代。 元代码:
let total_results = 0
while i < ar.length {
let temp_result = execute_query("select from my_table where ID in ('--list of next 10K IDs from ar--')")
i += 5000
total_results += temp_result
}
所以我分块进行,这样就不会失败。
我的问题:
我可以在 sql Server 中使用其他更好更快的解决方案吗?
解决方法
当前查询将在运行时解析传递到 in 子句中的一组 id。 id 数量越多,对性能的影响越大。
我会先尝试在临时表中插入 10K id。(如果需要,在 id 上创建索引)然后查询
select *
from my_table
where id in (select id from temp_table)
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。