Engineering Manager - Streaming

P-1110

Chez Databricks, nous sommes passionnés par l'idée de permettre aux équipes de données de résoudre les problèmes les plus difficiles au monde — qu'il s'agisse de faire du prochain mode de transport une réalité ou d'accélérer le développement de percées médicales. Nous y parvenons en construisant et en exploitant la meilleure plateforme d'infrastructure de données et d'IA au monde afin que nos clients puissent utiliser des insights de données approfondis pour améliorer leur activité.

Nous sommes l'équipe « Spark™ Structured Streaming » responsable de l'intégration des capacités de Stream Processing dans Spark™ et la Databricks Intelligence Platform. Le stream processing en est à ses débuts et nous sommes ici pour construire non seulement une technologie de Stream Processing à la pointe de la technologie, mais aussi la meilleure offre gérée de sa catégorie pour que les clients puissent exécuter leurs charges de travail de Stream Processing.

Nous recherchons un leader de l'ingénierie dévoué pour diriger les initiatives de développement de Spark™ Structured Streaming, englobant à la fois les composants open source et les composants spécifiques à Databricks. Votre mission principale sera de faire de Spark™ Structured Streaming un moteur de Stream Processing à la pointe de la technologie, en ajoutant des fonctionnalités avancées telles qu'une gestion d'état sophistiquée, de nouveaux opérateurs et, en même temps, en améliorant les performances du moteur tant du point de vue de la latence que du débit en réimaginant l'architecture du moteur.

Les responsabilités clés incluent :

• Diriger une équipe d'ingénierie talentueuse au sein de l'équipe Spark™ Structured Streaming pour développer et promouvoir le moteur dans l'OSS et la Databricks Data Intelligence Platform
• Superviser le recrutement continu de talents de premier plan et la montée en compétences des talents de l'équipe
• Mettre en œuvre des processus robustes pour exécuter efficacement la vision, la stratégie et la feuille de route du produit en alignement avec les objectifs et les priorités de l'organisation
• Construire des logiciels qui ne sont pas seulement de haute qualité mais faciles à exploiter.
• Avoir un impact à l'échelle de l'entreprise en stimulant l'adoption du Stream Processing à travers le portefeuille de produits Databricks
• Gérer la dette technique, y compris les décisions d'architecture technique à long terme et équilibrer la feuille de route du produit

Ce que nous recherchons :

• Plus de 5 ans d'expérience de travail dans un système lié, le streaming, le traitement de requêtes, l'optimisation de requêtes, y compris l'écosystème big-data, Apache Spark™ ou les internes de bases de données
• Une passion pour les systèmes de bases de données, les systèmes de stockage, les systèmes distribués, la conception de langages ou l'optimisation des performances
• Capacité à garantir que l'équipe construise des services d'infrastructure de haute qualité et fiables. Expérience de la responsabilité des tests, de la qualité et des SLA d'un produit. Expérience préalable dans la construction et la direction d'équipes dans un domaine technique complexe, tel que les systèmes de données distribués ou les internes de bases de données
• Capacité à attirer, embaucher et coacher des ingénieurs répondant aux normes de recrutement de Databricks. Capacité à faire monter en niveau l'équipe existante via l'embauche de talents seniors de premier ordre, la formation de leaders et l'aide aux membres en difficulté. Capacité à gagner la confiance de l'équipe et à guider leurs carrières. Expérience de la gestion d'équipes distribuées préférée
• À l'aise pour travailler de manière transversale avec la gestion de produit et directement avec les clients ; capacité à comprendre en profondeur le produit et les personas clients

Transparence de la fourchette de rémunération

Databricks s'engage en faveur de pratiques de rémunération justes et équitables. La ou les fourchettes de rémunération pour ce rôle sont indiquées ci-dessous et représentent la fourchette de salaire prévue pour les rôles non commissionnables ou les gains cibles pour les rôles commissionnables. Les packages de rémunération réels sont basés sur plusieurs facteurs propres à chaque candidat, incluant mais sans s'y limiter, les compétences liées au poste, la profondeur de l'expérience, les certifications et formations pertinentes, et le lieu de travail spécifique. Sur la base des facteurs ci-dessus, Databricks prévoit d'utiliser toute l'étendue de la fourchette. Le package de rémunération total pour ce poste peut également inclure l'éligibilité à un bonus de performance annuel, des actions (equity) et les avantages listés ci-dessus. Pour plus d'informations concernant la fourchette dans laquelle se situe votre emplacement, visitez notre page ici (https://www.databricks.com/sites/default/files/2024-08/us-pay-zone-mapping.pdf).

Fourchette de rémunération locale

$181,000—$253,750 USD

À propos de Databricks

Databricks est l'entreprise de Data et d'IA. Plus de 20 000 organisations dans le monde — dont adidas, AT&T, Bayer, Block, Mastercard, Rivian, Unilever et 70 % du Fortune 500 — s'appuient sur la Databricks Data + AI Platform pour construire et déployer des applications de données et d'IA, des analyses et des agents. Basée à San Francisco avec plus de 30 bureaux à travers le globe, Databricks propose une plateforme unifiée qui inclut Genie, Lakebase, Agent Bricks, Lakeflow, Lakehouse et Unity Catalog. Pour en savoir plus, suivez Databricks sur LinkedIn (https://www.linkedin.com/company/databricks), X (https://x.com/databricks), YouTube (https://www.youtube.com/@Databricks) et Instagram (https://www.instagram.com/databricksinc/?hl=en).

Avantages

Chez Databricks, nous nous efforçons de fournir des avantages et des privilèges complets qui répondent aux besoins de tous nos employés. Pour des détails spécifiques sur les avantages offerts dans votre région, cliquez ici (https://docs.