Empresas
Empleos
  • Sobre nosotros
  • Soluciones
    • Publicación de vacantes
      Publica tu vacante y recibe candidatos calificados en 48h.
    • Evaluación de candidatos
      500+ pruebas técnicas y psicológicas, más anti-fraude.
    • Headhunting
      Búsqueda ejecutiva a la medida de principio a fin.
    • Nómina + EOR
      Dispersión de nómina y EOR en más de 15 países de LATAM.
  • Precios
  • Empleos

0

420
Vistas
¿Cómo ejecuto los datos en Chunks for Papa Parse?

El tamaño de mi archivo es 2483385kb, el siguiente código que usa Papa Parser no me ayuda:

 this.readFile((output) => { _this.sample = get(Papa.parse(output, {preview: 2, skipEmptyLines: true, chunkSize: 1024 * 1024 * 45}), "data"); _this.csv = get(Papa.parse(output, {skipEmptyLines: true, chunkSize: 1024 * 1024 * 45}), "data"); });

No puede leer el archivo csv grande. ¿Lo estoy haciendo mal?

about 4 years ago · Juan Pablo Isaza
1 Respuestas
Responde la pregunta

0

Puedes probar la transmisión.

 /** * Returns an async generator that yields the CSV file line-by-line. * * @param path {String} * @param options {papa.ParseConfig} */ async function* readCsvStream(path, options) { const csvStream = createReadStream(path); const parseStream = papa.parse(papa.NODE_STREAM_INPUT, options); csvStream.pipe(parseStream); for await (const chunk of parseStream) { yield chunk; } } (async () => { try { const asyncIterator = readCsvStream(`${__dirname}/cad_fi.csv`, { header: true, dynamicTyping: true, }); for await (const chunk of asyncIterator) { // You can do anything with each row of the `.csv` file here. // like saving it to a DB row by row console.log(chunk); } } catch (error) { console.error(error); } })();

O, alternativamente, puede pasar una devolución de llamada de step a la función de parse , que se llamará en cada línea, evitando así cargar todo el csv en la memoria.

 /** * Reads a CSV file. * * @param path {String} * @param options {papa.ParseConfig} */ function readCsv(csvString, stepCallback, options) { papa.parse(csvString, { ...options, step: stepCallback, }); } (async () => { // I read it from FS because it is NodeJs, but you can get the string by any means. const csv = (await readFile(`${__dirname}/cad_fi.csv`)).toString(); const data = []; const errors = []; const stepCallback = (results, parser) => { if (results?.errors?.length) { errors.push(...results.errors); } data.push(results.data); }; const papaparseOptions = { header: true, dynamicTyping: true, }; try { readCsv( csv, stepCallback, papaparseOptions, ); console.log(errors); console.log(data.length); } catch (error) { console.error(error); } })();
about 4 years ago · Juan Pablo Isaza Denunciar
Responde la pregunta
Encuentra empleos remotos

¡Descubre la nueva forma de encontrar empleo!

Top de empleos
Top categorías de empleo
Empresas
Publicar vacante Precios Comercial
Legal
Términos y condiciones Política de privacidad
© 2026 PeakU Inc. All Rights Reserved.
Andres GPT
Recomiéndame algunas ofertas
Necesito ayuda