Staff Software Engineer - Streaming

In Databricks, siamo appassionati dell'idea di consentire ai team di dati di risolvere i problemi più difficili del mondo — dal rendere realtà la prossima modalità di trasporto all'accelerare lo sviluppo di scoperte mediche. Lo facciamo costruendo e gestendo la migliore piattaforma di infrastruttura dati e AI al mondo, in modo che i nostri clienti possano trasformare i deep data insights in migliori risultati di business.

Siamo il team Spark Structured Streaming, responsabile della costruzione dell'elaborazione in streaming in Apache Spark e nella Databricks Data Intelligence Platform. L'elaborazione in streaming è ancora ai suoi inizi e noi siamo qui per costruire non solo una tecnologia di streaming all'avanguardia, ma anche un'offerta gestita di prim'ordine affinché i clienti possano eseguire i propri carichi di lavoro in streaming.

Il ruolo

Cerchiamo un esperto Staff Engineer per guidare la direzione tecnica di Spark Structured Streaming, spaziando sia tra i componenti open source che quelli specifici di Databricks. La tua missione è rendere Spark Structured Streaming il motore di elaborazione in streaming all'avanguardia — aggiungendo capacità avanzate come una gestione sofisticata dello stato e nuovi operatori, reimmaginando al contempo l'architettura del motore per guidare miglioramenti in termini di latenza, throughput e costi.

Cosa farai:

• Definire e guidare la visione tecnica per Spark Structured Streaming tra OSS e la Databricks Data Intelligence Platform
• Progettare e costruire le capacità core del motore — gestione dello stato, nuovi operatori e miglioramenti architettonici alla latenza e al throughput
• Elevare lo standard per la qualità dell'ingegneria e l'operabilità, costruendo software che non sia solo di alta qualità ma anche facile da eseguire in produzione
• Generare un impatto a livello aziendale guidando l'adozione dell'elaborazione in streaming in tutto il portafoglio prodotti Databricks
• Guidare le decisioni sull'architettura a lungo termine e sul debito tecnico, bilanciandole con la roadmap del prodotto
• Fare da mentore e guidare tecnicamente gli ingegneri nel team, e collaborare con l'Engineering Manager per attrarre e far crescere talenti di alto livello

Cosa cerchiamo:

• Laurea (o superiore) in Computer Science o un campo tecnico correlato, o equivalente esperienza pratica
• 8+ anni nella costruzione di sistemi correlati — ecosistemi big-data, Apache Spark o database internals
• Una passione per i sistemi di database, i sistemi di storage, i sistemi distribuiti, la progettazione di linguaggi o l'ottimizzazione delle prestazioni
• Capacità di lavorare verso una visione pluriennale con deliverable incrementali
• Una comprovata esperienza nel rilascio di funzionalità mantenendo un alto standard di eccellenza operativa e qualità dell'ingegneria
• Capacità di lavorare in modo cross-funzionale con il product management e direttamente con i clienti, con la capacità di comprendere profondamente il prodotto e le customer persona

Trasparenza della fascia retributiva

Databricks si impegna per pratiche di compensazione eque ed imparziali. La/le fascia/e retributiva/e per questo ruolo è elencata di seguito e rappresenta la fascia salariale prevista per ruoli non commissionabili o i guadagni target per ruoli commissionabili. I pacchetti retributivi effettivi si basano su diversi fattori unici per ogni candidato, inclusi, ma non limitati a, competenze correlate al lavoro, profondità di esperienza, certificazioni e formazione pertinenti e specifica sede di lavoro. In base ai fattori sopra indicati, Databricks prevede di utilizzare l'intera ampiezza della fascia. Il pacchetto retributivo totale per questa posizione può anche includere l'idoneità a bonus annuali sulle prestazioni, equity e i benefit elencati sopra. Per ulteriori informazioni su quale fascia rientra la tua posizione, visita la nostra pagina qui (https://www.databricks.com/sites/default/files/2024-08/us-pay-zone-mapping.pdf).

Fascia retributiva locale

$182,400—$247,000 USD

Informazioni su Databricks

Databricks è l'azienda di Data e AI. Più di 20,000 organizzazioni in tutto il mondo — tra cui adidas, AT&T, Bayer, Block, Mastercard, Rivian, Unilever e il 70% delle Fortune 500 — si affidano alla Databricks Data + AI Platform per costruire e scalare app di dati e AI, analytics e agenti. Con sede a San Francisco e oltre 30 uffici in tutto il mondo, Databricks offre una piattaforma unificata che include Genie, Lakebase, Agent Bricks, Lakeflow, Lakehouse e Unity Catalog. Per saperne di più, segui Databricks su LinkedIn (https://www.linkedin.com/company/databricks), X (https://x.com/databricks), YouTube (https://www.youtube.com/@Databricks) e Instagram (https://www.instagram.com/databricksinc/?hl=en).

Benefit

In Databricks, ci sforziamo di fornire benefit e vantaggi completi che soddisfino le esigenze di tutti i nostri dipendenti. Per dettagli specifici sui benefit offerti nella tua regione clicca qui (https://docs.google.com/document/d/154un3e8Xav4BceOSlcYFZRGEuQI54xMxVydRwQn54eQ/edit?usp=sharing).

Il nostro impegno per la diversità e l'inclusione

In Databricks, ci impegniamo a promuovere una cultura diversificata e inclusiva in cui tutti possano eccellere. Ci prendiamo grande cura di garantire che le nostre pratiche di assunzione siano inclusive e rispettino gli standard di pari opportunità di lavoro. Gli individui che cercano impiego in Databricks vengono presi in considerazione indipendentemente da età, colore, disabilità, etnia, stato familiare o coniugale, identità o espressione di genere, lingua, origine nazionale, capacità fisica e mentale, affiliazione politica, razza, religione, orientamento sessuale, stato socio-economico, stato di veterano e altre caratteristiche protette.

Conformità

Se l'accesso a tecnologia soggetta a controllo per l'esportazione o al codice sorgente è richiesto per l'esecuzione dei doveri lavorativi, spetta al datore di lavoro decidere se richiedere una licenza del