diff --git a/dealfront_enrichment.py b/dealfront_enrichment.py index ff0283fb..8f8c35ce 100644 --- a/dealfront_enrichment.py +++ b/dealfront_enrichment.py @@ -84,30 +84,42 @@ class DealfrontScraper: except Exception as e: logger.error(f"Konnte Debug-Artefakte nicht speichern: {e}") - def login_and_find_list(self, search_name): - # ... (Diese Methode bleibt unverändert, verwendet aber jetzt TempConfig) ... + def login_and_find_list(self, search_name): + """ + Führt den gesamten Prozess vom Login bis zum Laden der Zielliste robust aus, + indem auf das Erscheinen der ersten Datenzeile gewartet wird. + """ try: + # === SCHRITTE 1-3: LOGIN, NAVIGATION, SUCHE LADEN (sind bereits stabil) === logger.info(f"Navigiere zur Login-Seite: {TempConfig.DEALFRONT_LOGIN_URL}") self.driver.get(TempConfig.DEALFRONT_LOGIN_URL) self.wait.until(EC.visibility_of_element_located((By.NAME, "email"))).send_keys(self.username) self.driver.find_element(By.CSS_SELECTOR, "input[type='password']").send_keys(self.password) self.driver.find_element(By.XPATH, "//button[normalize-space()='Log in']").click() logger.info("Login-Befehl gesendet.") + logger.info("Warte auf Dashboard und den 'Prospects finden' Quick-Link...") prospects_link_selector = (By.XPATH, "//a[@data-test-target-product-tile]") prospects_link = self.wait.until(EC.element_to_be_clickable(prospects_link_selector)) prospects_link.click() logger.info("'Prospects finden' geklickt.") + logger.info(f"Warte auf die Liste der Suchen und klicke auf '{search_name}'...") search_item_selector = (By.XPATH, f"//div[contains(@class, 'truncate') and normalize-space()='{search_name}']") search_item = self.wait.until(EC.element_to_be_clickable(search_item_selector)) search_item.click() - logger.info(f"Suche '{search_name}' geladen. Warte auf das Rendern der Ergebnistabelle.") - table_header_selector = (By.XPATH, "//th[normalize-space()='Firma']") - self.wait.until(EC.visibility_of_element_located(table_header_selector)) - time.sleep(5) - logger.info("Zielseite mit Ergebnissen erfolgreich erreicht.") + + # === SCHRITT 4: FINALE, ROBUSTE VERIFIZIERUNG === + logger.info(f"Suche '{search_name}' geladen. Warte auf die erste Datenzeile in der Tabelle...") + + # Wir warten auf das Erscheinen des Links in der ERSTEN Datenzeile. + # Dies ist der Beweis, dass die API-Abfrage abgeschlossen und die Tabelle gerendert wurde. + first_company_link_selector = (By.CSS_SELECTOR, "table#t-result-table tbody tr[id] .sticky-column a.t-highlight-text") + self.wait.until(EC.visibility_of_element_located((By.CSS_SELECTOR, first_company_link_selector))) + + logger.info("Erste Datenzeile erfolgreich gefunden. Die Seite ist bereit für die Extraktion.") return True + except Exception as e: logger.critical(f"Der Prozess ist fehlgeschlagen: {type(e).__name__}", exc_info=True) self._save_debug_artifacts()