Ich erstelle AI-Coding-Agenten-Benchmarks mit Tests und Docker-Setup.
Software-Ingenieur, KI-Codierungsbewertung, Agentenbenchmarking
Über diesen Service
Benötigst du reproduzierbare Programmierherausforderungen, um AI-Coding-Assistenten und autonome Coding-Agenten zu bewerten?
Ich erstelle und validiere Benchmark-Aufgaben im Software-Engineering, die die Leistung von Coding-Agents messen.
Dienstleistungen
- Repository-basierte Aufgabenbeschreibungen für Bugfixes, Features oder Refactoring
- Referenzlösungen und erwartete Ergebnisse
- Automatisierte Unit-Tests und Validierungsskripte
- Docker-Umgebung Setup, wenn im Paket enthalten
- Ausführungstests, Bewertungskriterien und Fehleranalyse
Lieferumfang
Aufgabenanweisungen, Benchmark-Dateien, Tests, Referenzlösungen (falls enthalten) und Validierungshinweise.
Mein Hintergrund umfasst Backend-Softwareentwicklung und praktische AI-Coding-Benchmark-Übungen mit Aufgabenstellung, Referenzlösungen, Testvalidierung und Docker.
Ich arbeite mit autorisierten Repositories und vereinbarten Projektanforderungen. Schreibe mir vor der Bestellung eine Nachricht, um Sprache, Aufgabenschwierigkeit und Paketumfang abzustimmen.
Anwendung testen:
Software
Gerät:
Linux
Mein Portfolio
FAQ
Automatische Übersetzung
Was ist ein AI-Coding-Agent-Benchmark?
Es ist eine reproduzierbare Software-Engineering-Aufgabe, die prüft, ob ein Coding-Agent korrekte Änderungen vornehmen und definierte Tests bestehen kann.
Kannst du Aufgaben aus meinem bestehenden Repository erstellen?
Ja, sofern du das Repository besitzt oder zur Nutzung berechtigt bist und den nötigen Zugriff gibst.
Beinhaltet du automatisierte Tests und Referenzlösungen?
Tests sind in allen Paketen enthalten. Referenzlösungen sind im Standard- und Premium-Paket enthalten.
Wirst du Docker-Setup liefern?
Docker-basiertes Setup ist im Premium-Paket enthalten oder kann dort angeboten werden, wo technisch möglich.
Kannst du Coding-Agent-Einreichungen bewerten?
Ja, gegen abgestimmte Abnahmetests und Kriterien; ein detaillierter Bewertungsbericht kann ein individuelles Angebot erfordern.
Ist der Benchmark mit meinem Bewertungs-Harness kompatibel?
Ich passe mich, sofern technisch machbar, an eine dokumentierte Schnittstelle an. Teile mir bitte vor der Bestellung dein gewünschtes Format mit.
