Ich werde fortgeschrittenes Web Scraping und Datenextraktion durchführen

In den letzten Monaten habe ich meinen eigenen Server eingerichtet, um komplexe Webseiten zu crawlen und Daten zu extrahieren. Ich sollte in der Lage sein, Cloudflare, Captchas, IP-Beschränkungen und ähnliches zu umgehen.

Einige Beispiele:

• Preise
• Bewertungen
• Google Maps Unternehmen
• Google SERPs

Sag mir einfach, worum es bei deinem Projekt geht, und ich sehe, was möglich ist.

Ich kann die Daten als Flachdateien (CSV/Excel/JSON usw.) liefern oder eine individuelle REST API (mit FastAPI/Node.js) bauen, damit deine Software die gescrapten Daten automatisch nutzen kann.

AI-Workflows: Falls nötig, kann ich auch ein LLM integrieren, das die gescrapten Inhalte kategorisieren, analysieren und zusammenfassen kann.