Tengo un script de Node que usa el método fs.writeFileSync() para escribir ~50 MB de JSON en un archivo en el disco.
Funciona bien en mi poderosa computadora portátil, pero cuando lo ejecuto en una máquina virtual en la nube con 1 GB de RAM, falla y muestra el error 137, que parece indicar un uso excesivo de la memoria.
¿Existe una forma más amigable con la memoria para guardar un archivo en el disco?
Este es el error que me sale:
20 error code ELIFECYCLE 21 error errno 137Hay una buena biblioteca llamada JSONStream que le permite transmitir su conjunto de datos, por ejemplo, a un archivo, en lugar de serializarlo con JSON.stringify y, por lo tanto, no consume mucha memoria. Algo como esto debería funcionar:
const JSONStream = require('JSONStream'); const fs = require('fs'); const records = [ {id: 1, name: "SomeName123"}, {id: 2, name: "SomeName123"}, {id: 3, name: "SomeName123"}, {id: 4, name: "SomeName123"}, {id: 5, name: "SomeName123"} // a lot more records ]; const transformStream = JSONStream.stringify(); const outputStream = fs.createWriteStream(__dirname + "/result.json"); transformStream.pipe(outputStream); records.forEach(transformStream.write); transformStream.end(); outputStream.on( "finish", () => { console.log("Done"); } );Estaba haciendo la pregunta equivocada. La pregunta correcta era "¿cómo evito que mi script se bloquee sin actualizar mi RAM?".
La respuesta es usar un archivo de intercambio en mi servidor Linux para evitar la memoria limitada. No estaba usando un archivo de intercambio, por lo que mi RAM se agotó rápidamente, pero resolví mi problema agregando un archivo de intercambio de 2 GB. No se necesita código nuevo.
https://www.answertopia.com/ubuntu/agregar-y-administrar-ubuntu-swap-space/