Senior Data Engineer

Senior Data Engineer Miejsce pracy: Warszawa Technologies we use Expected Databricks ETL Azure GCP SDLC About the project For our client, we are looking for an experienced Data Engineer with expert knowledge of Databricks for a 3-month engagement with a 4-5 hours per week workload. Your responsibilities Designing and optimizing Databricks environments to meet the specific needs of the project. Developing and managing ETL/ELT pipelines using Databricks to ensure seamless data integration. Building data processing workflows to automate and streamline data ingestion, transformation, and storage. Collaborating with the cross-functional team to define data engineering requirements and deliver solutions in a timely manner. Implementing and maintaining Delta Tables for data optimization and efficient storage. Ensuring data quality and applying best practices for pipeline testing and validation. Providing technical leadership and guidance to the project team, particularly in the area of Databricks implementation. Documenting the architecture and solutions to ensure clarity and knowledge sharing. Helping with the migration of data solutions to the cloud (Azure or GCP), including optimizations and testing. Our requirements Proven expertise in Databricks, including architecture, configuration, and optimization. Hands-on experience with Databricks integrations - crucial. Proficient in data engineering tasks such as ETL/ELT pipelines, orchestration, and quality assurance. Hands-on experience with cloud platforms, particularly Azure and GCP. Strong understanding of Git and CI/CD pipeline creation and integration. Familiarity with Delta Tables and utility pipelines for data optimization. Knowledge of SDLC processes, including code reviews and version control best practices. Experience with “opening a new client account” as the first Engineer/Developer joining the project - crucial. Experience working with cross-functional teams, including Data Engineers and Project Managers. Ability to lead workshops, meetings, and pair-programming sessions. Strong documentation and proposal development skills. Adept at presenting technical concepts to non-technical stakeholders. Preferred Qualifications: Experience with large-scale migration projects (e.g., moving solutions to GCP). Familiarity with QA frameworks for data pipelines. Certification in Databricks, Azure, or GCP is a plus. High maturity. Excellent communication and collaboration skills. Strong problem-solving and analytical thinking. Ability to translate tech into non-tech conversations and work effectively with the client - crucial. Ability to work in a fast-paced, dynamic environment. This is how we organize our work This is how we work at the client's site SQUARE ONE RESOURCES sp. z o.o. At Square One Poland we link IT experts with the business. With over 25 years of experience, we specialize in recruitment processes on a global scale. Despite years of experience, we still have a startup DNA and this is our advantage. Our offices are located in London and Warsaw, however, we can reach clients from all over the world, from start-ups to big worldwide corporations. Klikając w przycisk „Aplikuj” lub w inny sposób wysyłając zgłoszenie rekrutacyjne, zgadzasz się na przetwarzanie Twoich danych osobowych przez SQUARE ONE RESOURCES sp. z o.o. z siedzibą w: Puławska 2, 02-566 Warszawa (Pracodawca), jako administratora danych osobowych w celu przeprowadzenia rekrutacji na stanowisko wskazane w ogłoszeniu. Twoje dane osobowe będą przetwarzane w oparciu o następujące podstawy prawne: (a) aby podjąć działania na Twoje żądanie przed zawarciem umowy (np. informacje o oczekiwanym wynagrodzeniu i dostępności do rozpoczęcia pracy); (b) w oparciu o nasz prawnie uzasadniony interes (np. imię, nazwisko, data urodzenia, dane kontaktowe, wykształcenie, kwalifikacje zawodowe, przebieg dotychczasowego zatrudnienia); c) w oparciu o Twoją zgodę, która wyrażona jest poprzez przeslanie dokumentów aplikacyjnych zawierających takie informacje jak np. wizerunek czy zainteresowania.Podanie wszystkich danych osobowych, o których mowa powyżej jest dobrowolne, natomiast dane wymienione w lit. a) i b) są niezbędne do wzięcia udziału w rekrutacji. Niepodanie danych skutkuje brakiem możliwości rozpatrzenia kandydatury. Podanie pozostałych danych jest dobrowolne, ale może pomóc w sprawnym przeprowadzeniu procesu rekrutacji.Masz prawo żądać dostępu do Twoich danych (w tym uzyskania ich kopii), sprostowania danych, ich usunięcia, ograniczenia przetwarzania, przeniesienia, jak również wniesienia sprzeciwu wobec ich przetwarzania. Masz także prawo wniesienia skargi do Prezesa Urzędu Ochrony Danych Osobowych.Twoje dane osobowe mogą zostać przekazane dostawcom usługi publikacji ogłoszeń o pracę, dostawcom systemów do zarządzania rekrutacjami, dostawcom usług IT (hosting), dostawcom systemów informatycznych.Podane przez Ciebie dane osobowe nie będą wykorzystywane w celu profilowania albo podejmowania decyzji w sposób zautomatyzowany.Twoje dane osobowe będą przetwarzane przez okres maks. 1 roku od zakończenia publikacji ogłoszenia, chyba, że wyraziłeś odrębną zgodę na wykorzystanie Twoich danych osobowych w przyszłych rekrutacjach.W celu realizacji praw lub w przypadku jakichkolwiek pytań związanych z przetwarzaniem Twoich danych osobowych skontaktuj się z nami pod adresem: plinfosquareoneresources.com.

Location: Warszawa, PL

Posted Date: 4/17/2025