首页 > 解决方案 > 在两个表的条​​件下在休眠中批量插入

问题描述

我想在数据库或其他表中不存在的情况下在数据库中插入 URL 列表。
我目前的尝试非常慢,每个请求可能需要 100 毫秒 - 500 毫秒。

for(URL url : urls) {
 if (this.urlToEditService.findByUrl(newUrl).size() == 0 &&
     this.rawPageService.findByUrl(newUrl).size() == 0) {

      UrlToEdit urlToEdit = new UrlToEdit(newUrl);
      urlToEditService.save(urlToEdit);
 }
}

这是我的保存方法。

public boolean save(UrlToEdit urlToEdit) {
        Transaction transaction = null;
        try (Session session = factory.openSession()) {
            transaction = session.beginTransaction();
            session.save(urlToEdit);
            transaction.commit();
        } catch (Exception e) {
            if (transaction != null) {
                transaction.rollback();
            }
            e.printStackTrace();
            return false;
        }

        return true;
}

有没有办法通过一次事务插入所有内容?我可以想象打开和关闭的部分是蓝领。

EDIT1:我稍微更改了代码,所以我会根据这个答案保存在一个事务中:

List<URLToEdit> list = new ArrayList();
for(URL url : urls) {
 if (this.urlToEditService.findByUrl(newUrl).size() == 0 &&
     this.rawPageService.findByUrl(newUrl).size() == 0) {

      list.add( new UrlToEdit(newUrl));
 }
}

public boolean save(List<URLToEdit> urlToEditList) {
        Transaction transaction = null;
        
        int counter = 0;

        try (Session session = factory.openSession()) {
            transaction = session.beginTransaction();
            for (UrlToEdit urlToEdit : urlToEditList) {
                     session.save(urlToEdit);
                     counter++;

                     if(counter > 20) { 
                         counter = 0;
                         session.flush();
                         session.clear();
                     }
            }
            transaction.commit();
        } catch (Exception e) {
            if (transaction != null) {
                transaction.rollback();
            }
            e.printStackTrace();
            return false;
        }

        return true;
}

但是速度并没有增加。所以缓慢的部分仍然是存在检查。

标签: javasqlhibernatemariadb

解决方案


推荐阅读