Black Forest Labs
Member of Technical Staff - Data Engineering(m/w/x)
Vollzeit
Berufserfahren
Keine Angabe
Freiburg im Breisgau
BL
Black Forest Labs1 Monat
Member of Technical Staff - Large scale data infrastructure(m/w/x)
Vollzeit
Senior
AI/ML Job
Data Science
Keine Angabe
Freiburg im Breisgau
Nejo KI-Zusammenfassung
In this role, you will be at the forefront of building and optimizing data systems that support cutting-edge research and large-scale training runs, working with billions of assets and thousands of GPUs to enhance generative AI capabilities.
Lass KI die perfekten Jobs für dich finden!
Lade deinen CV hoch und die Nejo-KI findet passende Stellenangebote für dich.
Anforderungen
- •Management of large-scale object storage
- •Strong proficiency in Python
- •Experience with various file systems for data manipulation
- •Experience building reliable and scalable data loaders
- •Deep knowledge of cloud object storage
- •Hands-on familiarity with S3 and Azure Blob Storage
- •Experience with cloud platforms (AWS, GCP, or Azure)
- •Experience with Slurm/HPC environments
- •Creation and management of PB-scale storage infrastructure
- •Experience with large scale image and video data
Keine Angabe
Berufserfahrung
ca. 4 – 6 Jahre
Deine Aufgaben
- •Develop and maintain scalable infrastructure for massive image and video datasets
- •Optimize data retrieval for efficient GPU utilization during training runs
- •Build tools to manage datasets effectively
- •Coordinate data transfers from licensing partners
- •Ensure efficient use of object storage
Tools & Technologien
PythonS3Azure Blob StorageAWSGCPAzureSlurmHPC
Sprachen
Englisch – verhandlungssicher
Die Originalanzeige dieses Stellenangebotes in der aktuellsten Version findest du hier. Nejo hat diesen Job automatisch von der Website des Unternehmens Black Forest Labs erfasst und die Informationen auf Nejo mit Hilfe von KI für dich aufbereitet. Trotz sorgfältiger Analyse können einzelne Informationen unvollständig oder ungenau sein. Bitte prüfe immer alle Angaben in der Originalanzeige! Inhalte und Urheberrechte der Originalanzeige liegen beim ausschreibenden Unternehmen.
Ähnliche Jobs direkt in deine Inbox?
Noch nicht perfekt?