Ich baue skalierbare Datenpipelines mit Opensearch für blitzschnelle Suche


Über diesen Service
Automatische Übersetzung
Ich erstelle OpenSearch-Datenpipelines, die Produktions-Workloads von Schema-Design bis AWS-Bereitstellung abwickeln.
Was ich liefere
Datenaufnahme: Asynchrone ETL-Pipelines mit Python (asyncio, aiohttp). Batch- und Echtzeitverarbeitungsmodi. Unterstützung für mehrere Quellen: APIs, Datenbanken, Dateien, Streams.
OpenSearch-Konfiguration: Index-Mappings, die auf deine Abfragemuster optimiert sind. Benutzerdefinierte Analysatoren und Tokenizer. Relevanz-Optimierung und Aggregationsabfragen.
AWS-Integration: Lambda-Funktionen für ereignisgesteuerte Aufnahme. S3 für Rohdatenspeicherung. SQS/SNS für warteschlangenbasierte Verarbeitung. Deployment mit Amazon OpenSearch Service.
Technologie-Stack:
- Suche: OpenSearch
- Sprachen: Python
- AWS: Lambda, S3, SQS, SNS, OpenSearch, CloudWatch
Hintergrund:
- Entwicklung eines asynchronen Crawler-Engines, der über 100K Dokumente in OpenSearch ingestiert
- Veröffentlichte Forschung zu verteilten Suchsystemen (ICOCI 2023)
- Entwicklung von ETL-Pipelines für Zeitreihensysteme
- Erfahrung mit Multi-Tenant-Architekturen und Datenqualitätsüberwachung
Anwendungsfälle:
- E-Commerce-Produktsuche
- Log-Analysen und Überwachung
- Dokumenten- und Inhaltsuche
- Echtzeit-Dashboards
Bevor du bestellst:
- Sende mir eine Nachricht mit deinen Anforderungen. Ich prüfe deinen Anwendungsfall und bestätige das passende Paket.
Lerne Asadullah kennen
Python Backend Developer, AWS, Data Engineering
- AusBangladesch
- Mitglied seitOkt. 2023
- ⌀ Antwortzeit3 Tage
- Letzte Lieferung10 Monate
Sprachen
Bengalisch, Englisch
Automatische Übersetzung
Mein Portfolio
Meine weiteren Dienstleistungen im Bereich Software-Entwicklung
FAQ
Automatische Übersetzung
Ich möchte eine benutzerdefinierte Suchmaschine in meine Webanwendung integrieren.
Hervorragend! Ich kann OpenSearch verwenden, um indexierte Dokumente für Ihre Artikel zu speichern und anschließend APIs für die Bearbeitung komplexer Abfragen gemäß den Benutzeranforderungen bereitzustellen. Außerdem kann ich Statistiken zu Ihren Daten erstellen und APIs für ein Dashboard bereitstellen.
Ich habe eine Anwendung, die Dokumentdateien auf S3 speichert. Wie kann ich diese Dokumente indizieren?
Ich kann Amazon OpenSearch für Sie einrichten, um indexierte Dokumente zu speichern. Ich kann einen Batch-Prozessor verwenden, um die Dokumente massenhaft zu indexieren oder eine Lambda-Funktion auszulösen, um einzelne Dateien separat zu verarbeiten.
Ich muss Suchfunktionen auf Basis von Textdaten bereitstellen. Können Sie mir dabei helfen?
Sicher. Ich kann eine Pipeline erstellen, die Daten sowohl aus der Primärdatenbank als auch aus Datenbank-Streams aufnimmt und diese großen Textdaten dann effizient in OpenSearch speichert. Ich kann komplexe Abfragen erstellen, die auf OpenSearch-Clustern ausgeführt werden und nach Relevanz sortierte Ergebnisse liefern.
2 Bewertungen für diesen Service
| (2) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Zusammensetzung der Bewertung
- Kommunikation
- Qualität der Lieferung
- Preis-Leistungs-Verhältnis der Lieferung
Sortieren nach:
B 
bigfour98

Singapur
Quick to respond, polite, and display above-average understanding of opensearch
50 $-100 $
Preis
2 Tagen
Dauer
Hilfreich?C coghan

Vereinigte Staaten
Very professional. Great work
100 $-200 $
Preis
5 Tagen
Dauer
Hilfreich?
2 Bewertungen für diesen Service
| (2) | ||
| (0) | ||
| (0) | ||
| (0) | ||
| (0) |
Zusammensetzung der Bewertung
- Kommunikation
- Qualität der Lieferung
- Preis-Leistungs-Verhältnis der Lieferung
Sortieren nach:
B 
bigfour98

Singapur
Quick to respond, polite, and display above-average understanding of opensearch
50 $-100 $
Preis
2 Tagen
Dauer
Hilfreich?C coghan

Vereinigte Staaten
Very professional. Great work
100 $-200 $
Preis
5 Tagen
Dauer
Hilfreich?

