Staff Software Engineer - Streaming

Bei Databricks sind wir leidenschaftlich daran interessiert, Datenteams zu befähigen, die schwierigsten Probleme der Welt zu lösen – von der Verwirklichung der nächsten Fortbewegungsart bis hin zur Beschleunigung medizinischer Durchbrüche. Wir tun dies, indem wir die weltweit beste Daten- und KI-Infrastrukturplattform aufbauen und betreiben, damit unsere Kunden tiefe Dateneinblicke in bessere Geschäftsergebnisse umwandeln können.

Wir sind das Spark Structured Streaming Team und verantwortlich für den Aufbau von Stream Processing in Apache Spark und der Databricks Data Intelligence Platform. Stream Processing steckt noch in den Kinderschuhen, und wir sind hier, um nicht nur modernste Streaming-Technologie aufzubauen, sondern auch ein erstklassiges Managed Angebot für Kunden, um ihre Streaming-Workloads auszuführen.

Die Rolle

Wir suchen einen erfahrenen Staff Engineer, um die technische Richtung von Spark Structured Streaming voranzutreiben, was sowohl Open Source als auch Databricks-spezifische Komponenten umfasst. Ihre Mission ist es, Spark Structured Streaming zur hochmodernen Stream-Processing-Engine zu machen – durch das Hinzufügen fortschrittlicher Funktionen wie eines anspruchsvollen State Managements und neuer Operatoren, während Sie gleichzeitig die Architektur der Engine neu denken, um Verbesserungen bei Latenz, Durchsatz und Kosten zu erzielen.

Was Sie tun werden:

• Setzen und Vorantreiben der technischen Vision für Spark Structured Streaming über OSS und die Databricks Data Intelligence Platform hinweg
• Design und Aufbau von Kernfunktionen der Engine – State Management, neue Operatoren und architektonische Verbesserungen für Latenz und Durchsatz
• Anheben der Messlatte für Engineering-Qualität und Betriebsbarkeit, indem Software entwickelt wird, die nicht nur von hoher Qualität ist, sondern auch einfach in der Produktion zu betreiben ist
• Erzielung unternehmensweiter Auswirkungen durch die Förderung der Einführung von Stream Processing über das gesamte Databricks Produktportfolio hinweg
• Anleitung langfristiger Architektur- und technischer Schuldenentscheidungen, unter Abwägung mit der Produkt-Roadmap
• Mentoring und technische Leitung von Engineers im Team sowie Partnerschaft mit dem Engineering Manager, um Top-Talente zu gewinnen und zu fördern

Was wir suchen:

• BS (oder höher) in Informatik oder einem verwandten technischen Bereich oder gleichwertige praktische Erfahrung
• 8+ Jahre Erfahrung im Aufbau verwandter Systeme – Big-Data-Ökosysteme, Apache Spark oder Datenbank-Internals
• Eine Leidenschaft für Datenbanksysteme, Speichersysteme, verteilte Systeme, Sprachdesign oder Leistungsoptimierung
• Komfortabler Umgang mit der Arbeit an einer mehrjährigen Vision mit inkrementellen Ergebnissen
• Eine Erfolgsbilanz bei der Bereitstellung von Features unter Einhaltung hoher Standards für operative Exzellenz und Engineering-Qualität
• Komfortabler Umgang mit funktionsübergreifender Zusammenarbeit mit dem Produktmanagement und direkt mit Kunden, mit der Fähigkeit, das Produkt und die Kunden-Personas tiefgreifend zu verstehen

Transparenz der Gehaltsspanne

Databricks setzt sich für faire und gerechte Vergütungspraktiken ein. Die Gehaltsspanne(n) für diese Rolle sind unten aufgeführt und stellen die erwartete Gehaltsspanne für nicht provisionsbasierte Rollen oder das Zielgehalt für provisionsbasierte Rollen dar. Die tatsächlichen Vergütungspakete basieren auf mehreren Faktoren, die für jeden Kandidaten einzigartig sind, einschließlich, aber nicht beschränkt auf jobbezogene Fähigkeiten, Erfahrungstiefe, relevante Zertifizierungen und Schulungen sowie den spezifischen Arbeitsort. Basierend auf den oben genannten Faktoren geht Databricks davon aus, die volle Breite der Spanne zu nutzen. Das gesamte Vergütungspaket für diese Position kann auch die Berechtigung für einen jährlichen Leistungsbonus, Eigenkapital (Equity) und die oben aufgeführten Zusatzleistungen umfassen. Für weitere Informationen darüber, in welcher Spanne sich Ihr Standort befindet, besuchen Sie bitte unsere Seite hier (https://www.databricks.com/sites/default/files/2024-08/us-pay-zone-mapping.pdf).

Lokale Gehaltsspanne

$182,400—$247,000 USD

Über Databricks

Databricks ist das Data and AI Unternehmen. Mehr als 20.000 Organisationen weltweit – darunter adidas, AT&T, Bayer, Block, Mastercard, Rivian, Unilever und 70% der Fortune 500 – verlassen sich auf die Databricks Data + AI Platform, um Daten- und KI-Apps, Analysen und Agenten aufzubauen und zu skalieren. Mit Hauptsitz in San Francisco und über 30 Büros auf der ganzen Welt bietet Databricks eine einheitliche Plattform, die Genie, Lakebase, Agent Bricks, Lakeflow, Lakehouse und Unity Catalog umfasst. Um mehr zu erfahren, folgen Sie Databricks auf LinkedIn (https://www.linkedin.com/company/databricks), X (https://x.com/databricks), YouTube (https://www.youtube.com/@Databricks) und Instagram (https://www.instagram.com/databricksinc/?hl=en).

Vorteile

Bei Databricks bemühen wir uns, umfassende Vorteile und Extras anzubieten, die den Bedürfnissen all unserer Mitarbeiter entsprechen. Für spezifische Details zu den in Ihrer Region angebotenen Vorteilen klicken Sie bitte hier (https://docs.google.com/document/d/154un3e8Xav4BceOSlcYFZRGEuQI54xMxVydRwQn54eQ/edit?usp=sharing).

Unser Engagement für Vielfalt und Inklusion

Bei Databricks setzen wir uns dafür ein, eine vielfältige und inklusive Kultur zu fördern, in der jeder exzellente Leistungen erbringen kann. Wir legen großen Wert darauf, dass unsere Einstellungspraktiken inklusiv sind und die Standards für Chancengleichheit am Arbeitsplatz erfüllen. Personen, die eine Beschäftigung bei Databricks suchen, werden ohne Rücksicht auf Alter, Hautfarbe, Behinderung, ethnische Herkunft, Familien- oder Familienstand, Geschlechtsidentität oder -ausdruck, Sprache, nationale Herkunft, körperliche und geistige Fähigkeiten, politische Zugehörigkeit, Rasse, Religion, sexuelle Orientierung, sozioökonomischen Status, Veteranenst