Ich werde einen Web Scraper entwickeln

Die Frage Warum brauche ich einen Web Scraper? ist eine Frage, deren vollständige Antwort eine andere Frage ist: Möchtest du Daten von einer anderen Seite für deine Operationen?

Lass uns in die Details eintauchen, die selten gesagt werden. Ich werde einen Web Scraper entweder in NODEJS oder PHP entwickeln, basierend auf den Funktionen/Anforderungen der zu scrapenden Seite.

NodeJS wird für Seiten verwendet, deren Inhalte mit Javascript generiert werden. Dabei gilt:

• Die Puppeteer-Bibliothek wird genutzt, sie wurde von Chrome entwickelt und ist daher sehr zuverlässig.
• Seiten, die Login und Tastatureingaben erfordern, können ebenfalls gescrapt werden.

HINWEIS: Für NODE ist ein VPS erforderlich

PHP ist die erste Wahl für das Scraping, dient aber auch als Backup, falls Node.js versagt. Dafür gilt:

• Es stehen verschiedene Bibliotheken zur Verfügung
• Seiten mit backend-generierten Inhalten werden meist berücksichtigt

VORTEILE:

1. Einrichtung auf meinem Server vor der Bestellung.
2. Ich bleibe in ständigem Kontakt.
3. Die Daten werden entweder in Form einer JSON-API oder einer grafischen Benutzeroberfläche zurückgegeben.
4. Wenn eine API eingerichtet wird, ist der Zugriff eingeschränkt.

Kontaktiere mich vor der Bestellung. Ich freue mich darauf.