Empresas
Empleos
  • Sobre nosotros
  • Soluciones
    • Publicación de vacantes
      Publica tu vacante y recibe candidatos calificados en 48h.
    • Evaluación de candidatos
      500+ pruebas técnicas y psicológicas, más anti-fraude.
    • Headhunting
      Búsqueda ejecutiva a la medida de principio a fin.
    • Nómina + EOR
      Dispersión de nómina y EOR en más de 15 países de LATAM.
  • Precios
  • Empleos

0

189
Vistas
¿Titiritero y Chromium usando CPU grande?

Tengo un script nodejs ejecutándose en mi Macbook las 24 horas del día, los 7 días de la semana, y cada 20 minutos ejecuta Puppeteer para analizar el contenido de un sitio web. Cada dos días, el ventilador hace mucho ruido y veo que Chromium usa mucha CPU y RAM. ¿Hay alguna forma en que pueda arreglar esto?

Este es el código que estoy ejecutando:

 const options = { args: [ '--no-sandbox', '--disable-setuid-sandbox', '--disable-dev-shm-usage', '--disable-accelerated-2d-canvas', '--no-first-run', '--no-zygote', '--single-process', '--disable-gpu' ], headless: true } const browser = await puppeteer.launch(options); const page = await browser.newPage(); await page.setUserAgent('Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.125 Safari/537.36') await page.setViewport({ width: 1920, height: 1080 }); await page.setRequestInterception(true); page.on('request', (req) => { if(req.resourceType() === 'stylesheet' || req.resourceType() === 'font' || req.resourceType() === 'image'){ req.abort(); } else { req.continue(); } }); await page.goto(url, { waitUntil: 'networkidle0' }); // ... do stuff await page.close(); await browser.close();

ingrese la descripción de la imagen aquí

ingrese la descripción de la imagen aquí

about 4 years ago · Juan Pablo Isaza
1 Respuestas
Responde la pregunta

0

Tengo una idea para matar y lanzar titiritero automáticamente cada 20 minutos. El navegador de titiriteros (cromo) se cerrará automáticamente cuando finalice el trabajo de extracción/análisis, y luego, después de 20 minutos, se reiniciará el nuevo navegador, por lo que no consumirá más recursos. Estoy usando el grupo de navegadores (clúster) para este método.

 import cluster from 'cluster' import * as os from 'os' import * as process from 'process' import * as puppeteer from 'puppeteer' const launchOptions = { args: [ '--no-sandbox', '--disable-setuid-sandbox', '--disable-dev-shm-usage', '--disable-accelerated-2d-canvas', '--no-first-run', '--no-zygote', '--single-process', '--disable-gpu' ], headless: true } let lastProcessUptime = [] let userAgentString = 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.125 Safari/537.36' let viewportSize = { width: 1920, height: 1080 } let CPUsNum = os.cpus().length CPUsNum = 1 // Set this number as how many browser page do you want to launch simultaneously const runThis = async (processID) => { const browser = await puppeteer.launch(launchOptions) const page = await browser.newPage() await page.setUserAgent(userAgentString) await page.setViewport(viewportSize) await page.setRequestInterception(true) page.on('request', (request) => { let blockedResources = ['stylesheet', 'font', 'image'] if (blockedResources.includes(request.resourceType())) { await request.abort() } else { await request.continue() } }); await page.goto(url, { waitUntil: 'networkidle0' }) // ... and do stuff // ... then close the page and browser and also kill the process await page.close() await browser.close() lastProcessUptime.push({ pid: process.pid, uptime: Math.round(process.uptime() * 1000) }) process.kill(processID) process.exit(0) } if (!cluster.isWorker) { console.log(`Primary ${process.pid} is running`) // Fork workers. for (let i = 0; i < CPUsNum; i++) { cluster.fork() } cluster.on('exit', (worker, code, signal) => { console.log(`worker ${worker.process.pid} died`) /*with code: ${code} and signal ${signal}*/ setTimeout(() => cluster.fork(), (20 * 60 * 1000) - lastProcessUptime[lastProcessUptime.findIndex(process => process.pid === worker.process.pid)].uptime) //lets recreate the worker that died }) } else { let processID = process.pid console.log(`Worker ${processID} started`) ;(async (processID: number) => { await runThis(processID) })(processID) }
about 4 years ago · Juan Pablo Isaza Denunciar
Responde la pregunta
Encuentra empleos remotos

¡Descubre la nueva forma de encontrar empleo!

Top de empleos
Top categorías de empleo
Empresas
Publicar vacante Precios Comercial
Legal
Términos y condiciones Política de privacidad
© 2026 PeakU Inc. All Rights Reserved.
Andres GPT
Recomiéndame algunas ofertas
Necesito ayuda