Ich sammle Daten von jeder API oder Webseite in eine saubere Datenbank
Python-Datenpipelines, Web Scraping und Excel-Automatisierung
Über diesen Service
Ich schreibe Python-Code, der deine Daten abruft und ständig weiterholt – egal ob von einer REST API, einem öffentlichen Endpunkt oder einer Seite ohne API.
Was du bekommst:
- Ein Skript, das du besitzt und selbst ausführen kannst, kein Blackbox-Programm auf meinem Rechner
- - Ausgabe genau dort, wo du sie brauchst: CSV, Excel, SQLite oder deine eigene Datenbank
- - Wiederholungen, Fortsetzung nach einem Absturz und tägliche Integritätsprüfungen, die dir sagen, wann eine Quelle stillsteht
- - Eine kurze Notiz, worum es bei den Daten geht und wo sie unzuverlässig sind – der Teil, den die meisten Verkäufer überspringen
Ich habe rund um die Uhr Collector-Skripte gegen Börsen-APIs für vier Sportarten und gegen Krypto-Börsen-Endpunkte laufen lassen und Datensätze mit Millionen von Einträgen verarbeitet. Mein Code und meine Berichte sind öffentlich auf GitHub.
Bevor ich etwas schreibe, bestätige ich den Umfang schriftlich: Quellen, Felder, Format, Zeitplan. Wenn eine Webseite automatischen Zugriff blockiert oder die Daten hinter einem Login liegen, sage ich dir das, bevor du bezahlst, nicht danach.
Technologie:
Python
•
Excel
•
Pandas
Informationstyp:
Währung & Aktien
•
Preisvergleich
•
Websites
Technik:
Automatisiert
FAQ
Automatische Übersetzung
Bleibt das Script funktionstüchtig, wenn sich die Website ändert?
Kleine Layout-Änderungen behebe ich innerhalb des Revision-Fensters. Für langfristige Stabilität empfehle ich eine API-Quelle, falls vorhanden, und sage dir vor Beginn, wenn eine Webseite fragil wirkt.
Scrapst du Webseiten, die das nicht erlauben?
Nein. Ich prüfe zuerst die Nutzungsbedingungen und robots.txt und sage dir, wenn eine Quelle tabu ist. Ich würde den Auftrag lieber verlieren, als dir ein Skript zu liefern, das dein Konto sperrt.
Bekomme ich den Quellcode?
Ja, in jedem Paket. Du bekommst ein ausführbares Python-Skript und eine kurze Setup-Anleitung, damit du es selbst laufen lassen, ändern oder später an deinen Entwickler weitergeben kannst.
