Staff Software Engineer - Distributed Data Systems

P-988

In Databricks, siamo appassionati dell'idea di permettere ai team di dati di risolvere i problemi più difficili del mondo — dal rendere realtà la prossima modalità di trasporto all'accelerare lo sviluppo di scoperte mediche. Lo facciamo costruendo e gestendo la migliore piattaforma di infrastruttura dati e AI al mondo, in modo che i nostri clienti possano utilizzare approfonditi insight sui dati per migliorare il proprio business. Fondata da ingegneri — e ossessionata dai clienti — cogliamo ogni opportunità per risolvere sfide tecniche, dalla progettazione di UI/UX di prossima generazione per l'interfaccia con i dati alla scalabilità dei nostri servizi e della nostra infrastruttura su milioni di macchine virtuali. E stiamo solo iniziando.

L'analisi dei dati moderna impiega metodi sofisticati come il machine learning che vanno ben oltre le capacità di roll-up e drill-down dei motori di query SQL tradizionali. In qualità di software engineer nel team Runtime di Databricks, costruirai la prossima generazione di sistemi distribuiti di archiviazione ed elaborazione dei dati in grado di superare i motori di query SQL specializzati nelle prestazioni delle query relazionali, fornendo al contempo l'espressività e le astrazioni di programmazione necessarie per supportare carichi di lavoro diversi, dall'ETL alla data science.

Di seguito alcuni esempi di progetti:

Apache Spark™: Sviluppare il framework standard de facto open source per i big data.

Data Plane Storage: Fornire servizi e librerie client affidabili e ad alte prestazioni per archiviare e accedere a quantità enormi di dati su backend di cloud storage, ad esempio AWS S3, Azure Blob Store.

Delta Lake: Un sistema di gestione dello storage che combina la scala e l'efficienza dei costi dei data lake, le prestazioni e l'affidabilità di un data warehouse e la bassa latenza dello streaming. Le sue astrazioni e garanzie di livello superiore, incluse le transazioni ACID e il time travel, semplificano drasticamente la complessità dell'architettura di data engineering del mondo reale.

Delta Pipelines: È difficile gestire anche un singolo data engineering pipeline. L'obiettivo del progetto Delta Pipelines è rendere semplice e possibile orchestrare e gestire decine di migliaia di data pipeline. Fornisce un'astrazione di livello superiore per esprimere data pipeline e consente ai clienti di implementare, testare e aggiornare le pipeline, eliminando i carichi operativi per la gestione e la costruzione di data pipeline di alta qualità.

Performance Engineering: Costruire la prossima generazione di optimizer delle query e motore di esecuzione che sia veloce, privo di tuning, scalabile e robusto.

Cosa cerchiamo:

• BS (o superiore) in Computer Science, campo tecnico correlato o equivalente esperienza pratica.
• Capacità di lavorare verso una visione pluriennale con consegne incrementali.
• Motivazione nel fornire valore e impatto ai clienti.
• 8+ anni di esperienza a livello di produzione in Java, Scala o C++.
• Solida base in algoritmi e strutture dati e nei loro casi d'uso nel mondo reale.
• Esperienza con sistemi distribuiti, database e sistemi big data (Apache Spark, Hadoop).

Trasparenza della fascia retributiva

Databricks si impegna per pratiche di compensazione eque ed imparziali. La (le) fascia(e) retributiva(e) per questo ruolo è elencata di seguito e rappresenta l'intervallo salariale previsto per ruoli non soggetti a commissioni o i guadagni target per ruoli soggetti a commissioni. I pacchetti retributivi effettivi si basano su diversi fattori unici per ogni candidato, tra cui, a titolo esemplificativo ma non esaustivo, competenze relative al lavoro, profondità dell'esperienza, certificazioni e formazione rilevanti e specifica sede di lavoro. In base ai fattori sopra indicati, Databricks prevede di utilizzare l'intera ampiezza della fascia. Il pacchetto retributivo totale per questa posizione può anche includere l'idoneità a bonus annuali sulle prestazioni, equity e i benefit elencati sopra. Per ulteriori informazioni su quale fascia rientra la tua posizione, visita la nostra pagina qui (https://www.databricks.com/sites/default/files/2024-08/us-pay-zone-mapping.pdf).

Fascia retributiva locale

$182,400—$247,000 USD

Informazioni su Databricks

Databricks è l'azienda Data e AI. Più di 20.000 organizzazioni in tutto il mondo — tra cui adidas, AT&T, Bayer, Block, Mastercard, Rivian, Unilever e il 70% della Fortune 500 — si affidano alla piattaforma Databricks Data + AI per costruire e scalare app di dati e AI, analytics e agent. Con sede a San Francisco e oltre 30 uffici in tutto il mondo, Databricks offre una piattaforma unificata che include Genie, Lakebase, Agent Bricks, Lakeflow, Lakehouse e Unity Catalog. Per saperne di più, segui Databricks su LinkedIn (https://www.linkedin.com/company/databricks), X (https://x.com/databricks), YouTube (https://www.youtube.com/@Databricks) e Instagram (https://www.instagram.com/databricksinc/?hl=en).

Benefit

In Databricks, ci sforziamo di fornire benefit e vantaggi completi che soddisfino le esigenze di tutti i nostri dipendenti. Per dettagli specifici sui benefit offerti nella tua regione clicca qui (https://docs.google.com/document/d/154un3e8Xav4BceOSlcYFZRGEuQI54xMxVydRwQn54eQ/edit?usp=sharing).

Il nostro impegno per la diversità e l'inclusione

In Databricks, ci impegniamo a promuovere una cultura diversificata e inclusiva in cui tutti possano eccellere. Ci prendiamo molta cura di garantire che le nostre pratiche di assunzione siano inclusive e rispettino gli standard di parità di opportunità di lavoro. Gli individui che cercano lavoro in Databricks sono considerati senza distinzione di età, colore, disabilità, etnia, stato familiare o coniugale, identità o espressione di genere, lingua, origine nazionale, capacità fisica e mentale, affiliazione politica, razza, religione, orientamento sessuale, stato socio-economico, stato di veterano e altre caratteristiche protette.

Conformità

Se l'