Über das Unternehmen
Mindrift ist eine Plattform, die Fachexperten mit KI-Projekten führender Tech-Innovatoren verbindet. Das Unternehmen verfolgt das Ziel, das Potenzial von Generative AI durch echte Fachkompetenz weltweit freizusetzen.
Über die Rolle
Wir suchen einen erfahrenen Python Data Scraping Engineer für das Tendem-Projekt. In dieser Rolle werden Sie als AI Pilot bezeichnet und arbeiten in einem hybriden System aus KI-Agenten und menschlicher Expertise. Sie sind verantwortlich für spezialisierte Web-Scraping-Workflows und stellen durch kritisches Denken, Fachkompetenz und Qualitätskontrolle sicher, dass genaue und verwertbare Ergebnisse geliefert werden.
Aufgaben
- End-to-End Datenextraktions-Workflows über komplexe Websites verantworten
- Interne Tools (Apify, OpenRouter) und eigene Lösungen zur Beschleunigung der Datenerfassung nutzen
- Dynamische und interaktive Web-Quellen zuverlässig extrahieren und JavaScript-gerenderte Inhalte verarbeiten
- Datenqualitätsstandards durch Validierungen, Konsistenzprüfungen und Formatierungsvorgaben durchsetzen
- Scraping-Operationen für große Datenmengen durch effizientes Batching und Parallelisierung skalieren
Anforderungen
- Mindestens 3 Jahre Erfahrung in Data Engineering, Web Scraping, Automation oder Softwareentwicklung
- Tiefe Python-Kenntnisse in Web Scraping (BeautifulSoup, Selenium oder ähnlich)
- Erfahrung mit dynamischen Inhalten (JavaScript, AJAX, Infinite Scroll) und API-Abfragen über Proxies
- Nachgewiesene Fähigkeit, Daten aus komplexen Strukturen zu extrahieren
- Solide Kenntnisse in Datencleaning, Normalisierung und Validierung
- Praktische Erfahrung mit LLMs und KI-Frameworks
- Hohes Qualitätsbewusstsein und Sorgfalt bei der Datenbearbeitung
- Englisch: Oberes Anfängerniveau (B2) oder höher
Benefits
- Vollständig remote auf flexiblem Zeitplan
- Einzigartige Hybrid-Umgebung mit KI- und Menschenkollaboration
- Performance-basierte Bonusprogramme für hochwertige Arbeit
- Flexible Zeiteinteilung mit nur Laptop und stabiler Internetverbindung
- Moderne KI-Technologien und Tools (Apify, OpenRouter)
- Exposure zu führenden Tech-Innovation-Projekten
- Internationale Zusammenarbeit