tengo esta red:
y estoy tratando de obtener el número total de filas de la tabla que se encuentra al final de la web (1.341.412). el seleccionador es:
#app > div > div.container.landing-page-container > section.landing-page-section.dataset-preview > div.table-contents > div > div > div.socrata-visualization-container.loaded > div.socrata-pager > span.pager-labelLa web carga elementos a través de JS, por lo que estoy tratando de obtener este elemento a través de Shell de esta manera:
scrapy shell "http://localhost:8050/render.html?url="https://analisi.transparenciacatalunya.cat/es/Energia/Certificats-d-efici-ncia-energ-tica-d-edificis/j6ii-t3w2/data/""dentro de la concha:
fetch('https://analisi.transparenciacatalunya.cat/es/Energia/Certificats-d-efici-ncia-energ-tica-d-edificis/j6ii-t3w2')el estado de la respuesta es correcto: 200
pero no puedo encontrar una manera de obtener el texto de span class=pager-label
alguien podria ayudarme por favor... no puedo encontrar el
response.css(' '::text).get()Siempre recibo una respuesta vacía...