Senior Software Engineer - Distributed Data Systems

P-987

In Databricks, siamo appassionati dell'obiettivo di consentire ai team di dati di risolvere i problemi più difficili del mondo — dal rendere realtà la prossima modalità di trasporto all'accelerare lo sviluppo di scoperte mediche. Lo facciamo costruendo e gestendo la migliore piattaforma di infrastruttura dati e IA al mondo, in modo che i nostri clienti possano utilizzare approfondite intuizioni sui dati per migliorare il proprio business. Fondata da ingegneri — e ossessionata dai clienti — cogliamo ogni opportunità per risolvere sfide tecniche, dalla progettazione di UI/UX di nuova generazione per l'interfaccia con i dati alla scalabilità dei nostri servizi e della nostra infrastruttura su milioni di macchine virtuali. E stiamo solo iniziando.

L'analisi dei dati moderna impiega metodi sofisticati come il machine learning che vanno ben oltre le capacità di roll-up e drill-down dei motori di query SQL tradizionali. Come software engineer nel team Runtime di Databricks, costruirai la prossima generazione di sistemi distribuiti di archiviazione e elaborazione dati che possano superare i motori di query SQL specializzati nelle prestazioni delle query relazionali, fornendo al contempo l'espressività e le astrazioni di programmazione necessarie per supportare carichi di lavoro diversi, dall'ETL alla data science.

Di seguito alcuni esempi di progetti:

Apache Spark™: Sviluppare il framework standard open source de facto per i big data.

Data Plane Storage: Fornire servizi e librerie client affidabili e ad alte prestazioni per archiviare e accedere a quantità enormi di dati su backend di cloud storage, ad esempio AWS S3, Azure Blob Store.

Delta Lake: Un sistema di gestione dello storage che combina la scala e l'efficienza dei costi dei data lake, le prestazioni e l'affidabilità di un data warehouse e la bassa latenza dello streaming. Le sue astrazioni e garanzie di livello superiore, inclusi i processi ACID e il time travel, semplificano drasticamente la complessità dell'architettura di data engineering nel mondo reale.

Delta Pipelines: È difficile gestire anche un singolo data engineering pipeline. L'obiettivo del progetto Delta Pipelines è rendere semplice e possibile orchestrare e operare decine di migliaia di data pipeline. Fornisce un'astrazione di livello superiore per esprimere le data pipeline e consente ai clienti di distribuire, testare e aggiornare le pipeline, eliminando l'onere operativo per la gestione e la costruzione di data pipeline di alta qualità.

Performance Engineering: Costruire la prossima generazione di ottimizzatori di query e motori di esecuzione che siano veloci, privi di tuning, scalabili e robusti.

Cosa cerchiamo:

• BS (o superiore) in Computer Science, campo tecnico correlato o esperienza pratica equivalente.
• Capacità di lavorare verso una visione pluriennale con consegne incrementali.
• Motivazione nel fornire valore e impatto ai clienti.
• 5+ anni di esperienza a livello di produzione in Java, Scala o C++.
• Solida base in algoritmi e strutture dati e nei loro casi d'uso nel mondo reale.
• Esperienza con sistemi distribuiti, database e sistemi big data (Apache Spark, Hadoop).

Trasparenza della gamma retributiva

Databricks si impegna per pratiche di compensazione eque ed imparziali. La (le) gamma (e) retributiva (e) per questo ruolo è elencata di seguito e rappresenta la fascia salariale prevista per ruoli non commissionabili o i guadagni target per ruoli commissionabili. I pacchetti retributivi effettivi si basano su diversi fattori unici per ogni candidato, tra cui, a titolo esemplificativo ma non esaustivo, competenze relative al lavoro, profondità dell'esperienza, certificazioni e formazione pertinenti e specifica posizione lavorativa. In base ai fattori sopra indicati, Databricks prevede di utilizzare l'intera ampiezza della gamma. Il pacchetto retributivo totale per questa posizione può anche includere l'idoneità a bonus annuali sulle prestazioni, equity e i benefit sopra elencati. Per ulteriori informazioni su quale gamma appartiene la tua posizione, visita la nostra pagina qui (https://www.databricks.com/sites/default/files/2024-08/us-pay-zone-mapping.pdf).

Gamma retributiva locale

$157,700—$213,800 USD

Informazioni su Databricks

Databricks è l'azienda di Data e AI. Più di 20.000 organizzazioni in tutto il mondo — tra cui adidas, AT&T, Bayer, Block, Mastercard, Rivian, Unilever e il 70% delle Fortune 500 — si affidano alla Databricks Data + AI Platform per costruire e scalare app di dati e AI, analytics e agenti. Con sede a San Francisco e oltre 30 uffici in tutto il mondo, Databricks offre una piattaforma unificata che include Genie, Lakebase, Agent Bricks, Lakeflow, Lakehouse e Unity Catalog. Per saperne di più, segui Databricks su LinkedIn (https://www.linkedin.com/company/databricks), X (https://x.com/databricks), YouTube (https://www.youtube.com/@Databricks) e Instagram (https://www.instagram.com/databricksinc/?hl=en).

Benefit

In Databricks, ci sforziamo di fornire benefit e vantaggi completi che soddisfino le esigenze di tutti i nostri dipendenti. Per dettagli specifici sui benefit offerti nella tua regione clicca qui (https://docs.google.com/document/d/154un3e8Xav4BceOSlcYFZRGEuQI54xMxVydRwQn54eQ/edit?usp=sharing).

Il nostro impegno per la diversità e l'inclusione

In Databricks, ci impegniamo a promuovere una cultura diversificata e inclusiva in cui tutti possano eccellere. Ci prendiamo grande cura di garantire che le nostre pratiche di assunzione siano inclusive e rispettino gli standard di parità di opportunità di lavoro. Gli individui che cercano un impiego in Databricks vengono considerati senza distinzione di età, colore, disabilità, etnia, stato familiare o coniugale, identità o espressione di genere, lingua, origine nazionale, capacità fisica e mentale, affiliazione politica, razza, religione, orientamento sessuale, stato socio-economico, stato di veterano e altre caratteristiche protette.

Conformità

Se l'accesso a t