Member of Technical Staff - Large scale data infrastructure(m/w/x)

Vollzeit

Senior

AI/ML Job

Data Science

Keine Angabe

Freiburg im Breisgau

Nejo KI-Zusammenfassung

In this role, you will be at the forefront of building and optimizing data systems that support cutting-edge research and large-scale training runs, working with billions of assets and thousands of GPUs to enhance generative AI capabilities.

Lass KI die perfekten Jobs für dich finden!

Lade deinen CV hoch und die Nejo-KI findet passende Stellenangebote für dich.

Anforderungen

•Management of large-scale object storage
•Strong proficiency in Python
•Experience with various file systems for data manipulation
•Experience building reliable and scalable data loaders
•Deep knowledge of cloud object storage
•Hands-on familiarity with S3 and Azure Blob Storage
•Experience with cloud platforms (AWS, GCP, or Azure)
•Experience with Slurm/HPC environments
•Creation and management of PB-scale storage infrastructure
•Experience with large scale image and video data

Keine Angabe

Berufserfahrung

ca. 4 – 6 Jahre

Deine Aufgaben

•Develop and maintain scalable infrastructure for massive image and video datasets
•Optimize data retrieval for efficient GPU utilization during training runs
•Build tools to manage datasets effectively
•Coordinate data transfers from licensing partners
•Ensure efficient use of object storage

Tools & Technologien

PythonS3Azure Blob StorageAWSGCPAzureSlurmHPC

Sprachen

Englisch – verhandlungssicher

Die Originalanzeige dieses Stellenangebotes in der aktuellsten Version findest du hier. Nejo hat diesen Job automatisch von der Website des Unternehmens Black Forest Labs erfasst und die Informationen auf Nejo mit Hilfe von KI für dich aufbereitet. Trotz sorgfältiger Analyse können einzelne Informationen unvollständig oder ungenau sein. Bitte prüfe immer alle Angaben in der Originalanzeige! Inhalte und Urheberrechte der Originalanzeige liegen beim ausschreibenden Unternehmen.

Ähnliche Jobs direkt in deine Inbox?