We are looking for a senior engineer with advanced expertise in Python and Big Data ecosystems, focused on architecture and the migration of enterprise platforms at petabyte scale. The role involves technical leadership, strategic decision-making, Spark workload optimization, and designing the technical foundation for a Databricks ecosystem with Unity Catalog.

MUST HAVE:

• Expert-level knowledge of Python, with 2+ years of production PySpark experience,
  
• 1+ Years of hands-on architecture experience on Databricks, with deep understanding of Unity Catalog and Hive Metastore,
  
• 3+ Years of technical leadership experience, driving engineering strategy and team delivery,
  
• Proven experience leading enterprise-scale data platform migrations,
  
• Strong background in distributed system design handling petabyte-scale data,
  
• Solid understanding of data governance, compliance, and audit requirements,
  
• Experience designing robust APIs and integration patterns for enterprise environments,
  
• Passion for defensive programming and building scalable, reliable software,
  
• Excellent written and verbal communication skills, able to lead cross-functional collaboration,
  
• Strong problem-solving skills, strategic thinking, and decision-making under ambiguity,
  
• Good verbal and written communication skills in English (min. B2),
  
• Availability to work with US East Coast time zone.
  

RESPONSIBILITIES:

• Defining and evolving the technical roadmap for UCX migration workflows and platform architecture,
  
• Driving key architectural decisions and ensuring consistency across storage, compute, and governance layers,
  
• Leading the design and implementation of complex migration features and data workflows,
• Optimizing Spark workloads and ensuring performance, reliability, and scalability of the platform,
  
• Mentoring engineers, setting coding standards, and promoting best engineering practices,
  
• Researching and prototyping new migration capabilities and Unity Catalog integrations.
  

NICE TO HAVE:

• Experience as a Staff or Principal Engineer at a major technology company,
  
• Contributions to open-source data platforms,
• Experience workice directly with large enterprise customers in a sales engineering context,
• Degree in Computer Science, Engineering, or a related technical field (or equivalent practical experieng)
  

Interested in this role or think we might be a good match in the future? Send us your CV on [vezi email]hello@dcode.work— we’d love to keep in touch!
- - - - - - - - - - - - - - - - -

Căutăm un inginer senior cu expertiză avansată în Python și ecosisteme Big Data, orientat pe arhitectură și migrarea platformelor enterprise la scară petabyte. Rolul presupune leadership tehnic, decizii strategice, optimizarea workload-urilor Spark și proiectarea fundației tehnice pentru un ecosistem Databricks cu Unity Catalog.

Cerințe obligatorii:

• Cunoștințe avansate de Python, cu minim 2 ani experiență de producție în PySpark
  
• Minim 1 an experiență practică în arhitectură Databricks, cu înțelegere profundă a Unity Catalog și Hive Metastore
  
• Minim 3 ani de leadership tehnic, influențând direcția tehnică și livrarea echipelor
  
• Experiență demonstrată în migrarea platformelor enterprise de date
  
• Experiență în proiectarea de sisteme distribuite la scară foarte mare (nivel petabytes)
  
• Înțelegere solidă a guvernanței datelor, conformității și auditului
  
• Experiență în proiectarea de API-uri robuste și integrări enterprise
  
• Mentalitate orientată spre programare defensivă, scalabilitate și fiabilitate
  
• Abilități puternice de comunicare scrisă și verbală, capacitate de colaborare cross-funcțională
  
• Abilități superioare de analiză, gândire strategică și decizii în condiții de ambiguitate
  
• Engleză minim B2
  
• Disponibilitate pentru program compatibil cu fusul orar US East Coast
  

Responsabilități principale:

• Definirea și dezvoltarea roadmap-ului tehnic pentru fluxurile de migrare și arhitectura platformei
  
• Luarea deciziilor arhitecturale cheie și asigurarea consistenței între nivelurile de stocare, procesare și guvernanță.
  
• Proiectarea și implementarea componentelor critice de migrare și a fluxurilor de date complexe
  
• Optimizarea workload-urilor Spark pentru performanță, scalabilitate și fiabilitate
  
• Mentorat tehnic, stabilirea standardelor de cod și a celor mai bune practici de inginerie
  
• Cercetarea și prototiparea capabilităților noi de integrare cu Unity Catalog
  

Nice to have:

• Experiență precedentă ca Staff / Principal Engineer într-o companie tech majoră
  
• Contribuții la proiecte open-source în zona data engineering
  
• Experiență directă în colaborarea cu clienți enterprise, inclusiv partea de consultanță tehnică
  
• Studii în informatică, inginerie sau domenii conexe (sau experiență echivalentă)
  

Dacă ești interesat(ă) de acest rol sau crezi că am putea colabora în viitor, trimite-ne CV-ul tău la [vezi email]hello@dcode.work — ne-ar plăcea să rămânem în contact!