微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

使用 Java 优化数据库插入的最佳方法

如何解决使用 Java 优化数据库插入的最佳方法

程序是用java编写的。 25 个线程正在处理 100 万个任务。每个任务都将数据保存到 DB 中,因此发生了 100 万次 DB 插入。为了优化这一点,我们尝试了以下方法

  1. 任务将数据保存到 ConcurrentLinkedDeque 中
  2. 一个线程定期轮询 duque 并获取该时间点的所有可用对象。
  3. 一旦可用对象的数量达到阈值(比如 100K),然后创建一个线程进行保存。

但这种方法并没有提高整体性能

我想减少数据库插入的次数(目前为 100 万次)以提高性能。是否有任何替代解决方案,例如高性能 - 多个并发发布者和单个并发订阅者类型的实现?

解决方法

通过批处理命令减少逐行处理的开销。许多 API 都包含批处理命令的方法,或者您可以自己将它们与这样的语句组合起来:

INSERT INTO products (product_no,name,price)
SELECT 1,'Cheese',9.99 FROM dual UNION ALL
SELECT 2,'Bread',1.99 FROM dual UNION ALL
SELECT 3,'Milk',2.99 FROM dual;

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。