Quiero realizar un web scraping para todos los datos dentro del cuerpo de la tabla principal en la url https://data.anbima.com.br/debentures/AGRU12/agenda ... Sin embargo, como implementa la paginación, no puedo obtener eso se hizo fácilmente... Se me ocurrió el siguiente código que no funciona... Recibo el error ReferenceError: list is not defined , aunque lo he definido justo antes del ciclo while...

 const puppeteer = require('puppeteer'); const fs = require('fs'); (async () => { const browser = await puppeteer.launch(); const page = await browser.newPage(); await page.goto(`https://data.anbima.com.br/debentures/AGRU12/agenda`); await page.waitForSelector('.normal-text'); var list = []; while (true) { let nextButton; await page.evaluate(async () => { const nodeList = document.querySelectorAll( '.anbima-ui-table > tbody > tr' ); let nodeArray = [...nodeList]; nextButton = document.querySelector('.anbima-ui-pagination__next-button'); let listA = nodeArray .map((tbody) => [...tbody.children].map((td) => [...td.children])) .map((tr) => tr.map((span) => span[0].innerHTML .replace('<label class="flag__children">', '') .replace('</label>', '') ) ); list.push(listA); }); if (!nextButton) { break; } else { await page.goto(nextButton.href); } } fs.writeFile('eventDates.json', JSON.stringify(list[0], null, 2), (err) => { if (err) throw new Error('Something went wrong'); console.log('well done you got the dates'); }); await browser.close(); })();