java - 如何减少 DataNucleus + Derby 的堆使用量

Question

我有一个 Java 桌面应用程序，它从服务中批量下载 700K 条目，每批 50K，并将它们存储在 Derby 库中

问题是，只有当我设置了 -Xmx1024 时，这才有效，否则应用程序将崩溃并显示堆错误消息。虽然最终数据库大小在100M左右

您能否建议一种优化以下代码以使用更少内存的方法

下载的代码非常像这样

public static final void getItems() {
  ItemsRequest req = new ItemsRequest();
  Gson g = new Gson();
  int next_index_to_read = 0;
  int max_read_entry_count = 50000;
  req.setLimit(max_read_entry_count);
  ItemsResponse resp = null;
  do{
    resp = g.fromJson(postRequest(g.toJson(req)), ItemsResponse.class);
    resp.saveItems();
    next_index_to_read += max_read_entry_count;
    req.setFrom(next_index_to_read);
  }while(resp.getTotalItemsEntryCount()>next_index_to_read);
}

负责保存数据的代码是

public class ItemsResponse
  public void saveItems() {
    PersistenceManagerFactory pmf = PMF.getPmf();

    PersistenceManager pm = pmf.getPersistenceManager();
    Transaction tx = pm.currentTransaction();

    try {
      tx.begin();

      if (data != null) {
        for (Item item : data) {
          Item item = null;
          try {
            item = pm.getObjectById(Item.class, item.getItemId());
          } catch (Exception e) {
            continue;
          }
          pm.makePersistent(item);
        }
      }
      tx.commit();
    } catch (Exception e) {
      Logger.getLogger("com.example").error("ItemResponse.saveData", e);
    } finally {
      if (tx.isActive()) {
        tx.rollback();
      }
    }
    pm.close();
  }

Answer 1

http://www.datanucleus.org/products/accessplatform_3_1/jdo/troubleshooting.html