node.js - 从nodejs导入数据到Elastic Search

Question

我正在使用官方 JavaScript 客户端设置一个简单的 NodeJS REST 服务来与 Elasticsearch 交互。我尝试使用nodejs导入数据，但在1500条记录后失败。我想在elasticsearch中导入200万条数据

Answer 1

我想到了使用 Nodejs 导入数百万数据。

1. 首先我们需要分成很多部分
2. 使用 async 来管理 Nodejs 的异步行为。
3. 默认情况下，Node js 中的内存限制为 512 mb，但在这种情况下，您需要增加 8 GB。

   node --max-old-space-size=8192 my-node-script.js #increase to 8gb.

4. 现在运行它。