Empresas
Empleos
  • Sobre nosotros
  • Soluciones
    • Publicación de vacantes
      Publica tu vacante y recibe candidatos calificados en 48h.
    • Evaluación de candidatos
      500+ pruebas técnicas y psicológicas, más anti-fraude.
    • Headhunting
      Búsqueda ejecutiva a la medida de principio a fin.
    • Nómina + EOR
      Dispersión de nómina y EOR en más de 15 países de LATAM.
  • Precios
  • Empleos

0

320
Vistas
haga clic en el enlace automáticamente y raspando

Intento extraer todos los datos de los productos de esta página:

https://www.shufersal.co.il/online/he/קטגוריות/סופרמרקט/חטיפים%2C-מתוקים-ודגני-בוקר/c/A25

Lo intenté

 shufersal = "https://www.shufersal.co.il/online/he/%D7%A7%D7%98%D7%92%D7%95%D7%A8%D7%99%D7%95%D7%AA/%D7%A1%D7%95%D7%A4%D7%A8%D7%9E%D7%A8%D7%A7%D7%98/%D7%97%D7%98%D7%99%D7%A4%D7%99%D7%9D%2C-%D7%9E%D7%AA%D7%95%D7%A7%D7%99%D7%9D-%D7%95%D7%93%D7%92%D7%A0%D7%99-%D7%91%D7%95%D7%A7%D7%A8/c/A25" from selenium import webdriver from webdriver_manager.chrome import ChromeDriverManager driver = webdriver.Chrome(ChromeDriverManager().install()) import time driver.get(shufersal) products = driver.find_elements_by_css_selector("li.miglog-prod.miglog-sellingmethod-by_unit" )

el problema es que los detalles del producto solo se muestran cuando hago clic en el producto:

ingrese la descripción de la imagen aquí

ingrese la descripción de la imagen aquí

¿Hay alguna opción para hacer clic en todos los enlaces automáticamente y raspar las ventanas abiertas?

over 4 years ago · Santiago Trujillo
1 Respuestas
Responde la pregunta

0

Lo que desea se puede lograr, pero es un proceso que consume mucho más tiempo.

Tendrás que:

identifique los elementos en los que necesita hacer clic en la página (probablemente tendrán la misma clase) y luego selecciónelos todos:

 butons_to_click = driver.find_elements_by_css_selector({RELEVANT SELECTOR HERE})

Luego, debe recorrer todos los elementos en los que se puede hacer clic, hacer clic en ellos, esperar a que se cargue la ventana emergente, raspar los datos, cerrar la ventana emergente:

 scraped_list = [] for button_instance in buttons_to_click: button_instance.click() #scrape the information you need here and append to scraped_list #find close popup button driver.find_element_by_xpath({XPATH TO ELEMENT}).click()

Para que esto funcione correctamente, es importante configurar el parámetro de espera implícita de Selenium. Lo que hace es que si no encuentra el elemento requerido, esperará X segundos hasta que se cargue, si pasa X, arrojará un error (puede manejar el error en su código si se espera) .

En su caso, necesitará el tiempo de espera porque después de hacer clic en el producto para mostrar la ventana emergente, la información puede tardar unos segundos en cargarse, en caso de que no configure espera implícitamente, su secuencia de comandos saldrá con un elemento no error encontrado Puede encontrar más información sobre los parámetros de espera de Selenium aquí: https://selenium-python.readthedocs.io/waits.html

 #put this line immediatelly after creating the driver object driver.implicitly_wait(10) # seconds

*** Sugerencia: le sugiero que siempre use Xpath cuando busque elementos, su sintaxis en realidad puede emular todos los demás selectores de selenio, es más rápido y hará una transición más fácil a los analizadores html compilados en C (que necesitará en caso de escalar su raspador: recomiende lxml un paquete de python que use un analizador compilado)

over 4 years ago · Santiago Trujillo Denunciar
Responde la pregunta
Encuentra empleos remotos

¡Descubre la nueva forma de encontrar empleo!

Top de empleos
Top categorías de empleo
Empresas
Publicar vacante Precios Comercial
Legal
Términos y condiciones Política de privacidad
© 2026 PeakU Inc. All Rights Reserved.
Andres GPT
Recomiéndame algunas ofertas
Necesito ayuda