Staff Software Engineer - Streaming

Chez Databricks, nous sommes passionnés par l'idée de permettre aux équipes de données de résoudre les problèmes les plus difficiles au monde — qu'il s'agisse de faire du prochain mode de transport une réalité ou d'accélérer le développement de percées médicales. Nous y parvenons en construisant et en exploitant la meilleure plateforme d'infrastructure de données et d'IA au monde afin que nos clients puissent transformer des insights de données profonds en de meilleurs résultats commerciaux.

Nous sommes l'équipe Spark Structured Streaming, responsable de l'intégration du traitement de flux (stream processing) dans Apache Spark et la Databricks Data Intelligence Platform. Le traitement de flux en est encore à ses débuts, et nous sommes ici pour construire non seulement une technologie de streaming à la pointe de la technologie, mais aussi une offre gérée de premier plan pour que les clients puissent exécuter leurs charges de travail de streaming.

Le rôle

Nous recherchons un Staff Engineer expérimenté pour piloter la direction technique de Spark Structured Streaming, couvrant à la fois les composants open source et ceux spécifiques à Databricks. Votre mission est de faire de Spark Structured Streaming le moteur de traitement de flux à la pointe de la technologie — en ajoutant des capacités avancées telles qu'une gestion d'état sophistiquée et de nouveaux opérateurs, tout en réimaginant l'architecture du moteur pour améliorer la latence, le débit et les coûts.

Ce que vous ferez :

• Définir et piloter la vision technique de Spark Structured Streaming à travers l'OSS et la Databricks Data Intelligence Platform
• Concevoir et construire les capacités de base du moteur — gestion d'état, nouveaux opérateurs et améliorations architecturales de la latence et du débit
• Rehausser le niveau de qualité de l'ingénierie et de l'opérabilité, en construisant des logiciels qui sont non seulement de haute qualité mais aussi faciles à exécuter en production
• Avoir un impact à l'échelle de l'entreprise en stimulant l'adoption du traitement de flux à travers le portefeuille de produits Databricks
• Guider l'architecture à long terme et les décisions relatives à la dette technique, en les équilibrant avec la feuille de route du produit
• Mentorat et direction technique des ingénieurs de l'équipe, et partenariat avec l'Engineering Manager pour attirer et faire croître des talents de premier plan

Ce que nous recherchons :

• BS (ou supérieur) en informatique ou dans un domaine technique connexe, ou une expérience pratique équivalente
• 8+ ans de construction de systèmes connexes — écosystèmes de big-data, Apache Spark ou l'interne des bases de données
• Une passion pour les systèmes de bases de données, les systèmes de stockage, les systèmes distribués, la conception de langages ou l'optimisation des performances
• À l'aise pour travailler vers une vision pluriannuelle avec des livrables incrémentaux
• Un historique de livraison de fonctionnalités tout en maintenant un niveau élevé d'excellence opérationnelle et de qualité d'ingénierie
• À l'aise pour travailler de manière transversale avec la gestion de produit et directement avec les clients, avec la capacité de comprendre profondément le produit et les personas clients

Transparence de la gamme de rémunération

Databricks s'engage à respecter des pratiques de rémunération équitables et justes. La ou les gammes de rémunération pour ce rôle sont indiquées ci-dessous et représentent la fourchette de salaire prévue pour les rôles non commissionnables ou les gains cibles pour les rôles commissionnables. Les packages de rémunération réels sont basés sur plusieurs facteurs propres à chaque candidat, y compris, mais sans s'y limiter, les compétences liées au poste, la profondeur de l'expérience, les certifications et formations pertinentes, et le lieu de travail spécifique. Sur la base des facteurs ci-dessus, Databricks prévoit d'utiliser toute l'étendue de la gamme. Le package de rémunération total pour ce poste peut également inclure l'éligibilité à un bonus de performance annuel, des actions (equity) et les avantages listés ci-dessus. Pour plus d'informations concernant la gamme dans laquelle se trouve votre emplacement, visitez notre page ici (https://www.databricks.com/sites/default/files/2024-08/us-pay-zone-mapping.pdf).

Gamme de rémunération locale

$182,400—$247,000 USD

À propos de Databricks

Databricks est la société Data et AI. Plus de 20,000 organisations à travers le monde — incluant adidas, AT&T, Bayer, Block, Mastercard, Rivian, Unilever, et 70% des Fortune 500 — s'appuient sur la Databricks Data + AI Platform pour construire et dimensionner des applications de données et d'IA, des analyses et des agents. Basée à San Francisco avec plus de 30 bureaux dans le monde, Databricks offre une plateforme unifiée qui inclut Genie, Lakebase, Agent Bricks, Lakeflow, Lakehouse, et Unity Catalog. Pour en savoir plus, suivez Databricks sur LinkedIn (https://www.linkedin.com/company/databricks), X (https://x.com/databricks), YouTube (https://www.youtube.com/@Databricks), et Instagram (https://www.instagram.com/databricksinc/?hl=en).

Avantages

Chez Databricks, nous nous efforçons de fournir des avantages et des privilèges complets qui répondent aux besoins de tous nos employés. Pour des détails spécifiques sur les avantages offerts dans votre région, cliquez ici (https://docs.google.com/document/d/154un3e8Xav4BceOSlcYFZRGEuQI54xMxVydRwQn54eQ/edit?usp=sharing).

Notre engagement envers la diversité et l'inclusion

Chez Databricks, nous nous engageons à favoriser une culture diversifiée et inclusive où chacun peut exceller. Nous veillons scrupuleusement à ce que nos pratiques d'embauche soient inclusives et respectent les normes d'égalité des chances en matière d'emploi. Les personnes cherchant un emploi chez Databricks sont considérées sans distinction d'âge, de couleur, de handicap, d'ethnie, de situation familiale ou matrimoniale, d'identité ou d'expressio