Ich erstelle einen Web Scraper für Cloudflare- und Bot-geschützte Seiten

Einige Informationen wurden automatisch übersetzt.

Bangladesch

Ich spreche Bengalisch, Englisch, Hindi

AI- und LLM-Backend-Engineer, RAG-Chatbots, Web-Scraping, AI-Deployment

AI/LLM-Backend-Engineer. Ich baue AI-Systeme, die in der Produktion funktionieren, nicht nur im Notebook. Ich bin Gründungsingenieur bei einem AI-Startup, wo ich das Backend von Grund auf neu aufgeba...
Über diesen Service

Dein Scraper hat aufgehört zu funktionieren, als die Seite Cloudflare oder DataDome aktiviert hat. Ich bekomme die Daten trotzdem.


Die meisten Verkäufer scheitern, sobald ein Ziel echte Bot-Schutzmaßnahmen hinzufügt. Genau auf diese Arbeit spezialisiere ich mich. Ich habe einen Open-Source-AI-Browser-Agenten (153 Sterne auf GitHub) entwickelt, der Daten von Seiten mit Cloudflare, DataDome, Akamai und PerimeterX Schutz zieht, und ich betreibe eine Produktionspipeline, die täglich über 3.900 Quellen scrapet, ohne blockiert zu werden.


Was du bekommst:

- Saubere, strukturierte Daten im CSV-, JSON-, Excel-Format oder direkt in deine Datenbank

- Dokumentierten, wartbaren Code, der Layout-Änderungen überlebt

- Proxy-Rotation, Wiederholungen und Fehlerbehandlung, damit die Runs nicht stillschweigend fehlschlagen

- Optionales Scheduling, damit es automatisch auf deinem Server läuft


Was ich nicht mache: alles, was gegen die Nutzungsbedingungen einer Seite verstößt. Ich sage dir ehrlich, wenn ein Ziel nicht erlaubt ist.


So funktioniert es: Schick mir die URLs und die Felder, die du brauchst, ich bestätige die Machbarkeit, baue es und liefere die Daten plus ein kurzes Walkthrough-Video.


Schick mir die Seite und ich sage dir sofort, ob es machbar ist.

Technologie:

Python

•

Instant Data Scraper

•

NodeJS

•

Puppenspieler

Informationstyp:

Notierungen

•

Immobilien

•

Social Media

•

Websites

Technik:

Automatisiert

Mein Portfolio