Ich werde deinen kaputten Python-Scraper, dein API-Skript oder deine Datenpipeline reparieren

Einige Informationen wurden automatisch übersetzt.

China

Ich spreche Chinesisch, Englisch

Python-Marktdaten-Ingenieur für OHLCV und API-Integrationen

Python-Entwickler mit Fokus auf Marktdaten und Automatisierung. Ich baue OHLCV-Sammler, Broker- und Exchange-API-Integrationen sowie Scraper, die Daten nicht stillschweigend verlieren: idempotente Sp...
Über diesen Service

Dein Skript hat gestern funktioniert. Heute gibt es 429-Fehler und es stopt.


Ich repariere kaputte Python-Scraper, API-Clients und Datenpipelines – und sage dir, warum es kaputtging, damit es nicht erneut kaputtgeht.


WAS DU BEKOMMST

- Ein funktionierendes Skript, kein Patch, das nächste Woche wieder stirbt

- Wiederholungen mit Backoff, falls der Fehler durch Ratenbegrenzung verursacht wird

- Logging, das dir sagt, welche Anfrage gestorben ist und warum

- Eine kurze schriftliche Notiz: Ursachenkern, was ich geändert habe, wie du es beim nächsten Mal erkennst


WIE ICH ARBEITE

Ich reproduziere den Fehler zuerst. Wenn ich ihn nicht reproduzieren kann, kann ich ihn auch nicht beheben – daher frage ich nach dem Fehlerausgabe, der ihn auslöst, oder einer Muster der Daten. Kein Raten, kein “Versuch Upgraden von requests und schauen”.


WAS ICH NICHT MACHE

- Umgehung von CAPTCHAs, Logins oder Anti-Bot-Schutz

- Anfassen von Dingen außerhalb dessen, was du mir schickst

- Versprechen, dass dein Scraper nie wieder kaputtgeht. Seiten ändern sich. Was ich tun kann, ist den nächsten Bruch offensichtlich statt still zu machen.


Schick mir die Fehlermeldung und das Skript. In einer einzigen Antwort sag ich dir, ob es reparierbar ist und was es kostet – bevor du bestellen.


Zielplattform:

PostgreSQL

•

mySQL

•

Amazon S3

•

Andere

Tools und Plattformen:

Andere

Mein Portfolio