Data engineer AI/ML
BCF Software Sp. z o.o. Warszawa Mid
90–130 zł/mies
⚙️ Machine LearningStacjonarnieB2B CONTRACT
Aplikuj na tę ofertę
Wyślemy Twój profil bezpośrednio do firmy.
O roli
Twój zakres obowiązków, Projektowanie, budowanie i utrzymanie potoków danych przy użyciu Python, PySpark oraz SQL., Rozwój i operacjonalizacja rozwiązań w obszarze Databricks Lakehouse., Tworzenie oraz zarządzanie procesami (workflows) za pomocą Apache Airflow., Wdrażanie i rozwój procesów CI/CD z wykorzystaniem Azure DevOps oraz Azure Pipelines., Praca z systemem Git (w oparciu o Pull Requests oraz przepływy Feature-Branch)., Automatyzacja i monitorowanie zadań przetwarzania danych (np. Databricks Lakeflow Jobs)., Pakietowanie, wdrażanie i zarządzanie kodem przy użyciu Databricks Asset Bundles., Dbanie o najwyższą jakość danych poprzez testowanie i automatyzację (pytest, pre-commit hooks)., Praca w skonteneryzowanych środowiskach deweloperskich (Devcontainers, rozszerzenia VS Code).
To oferujemy, Stabilną współpracę w oparciu o kontrakt B2B., Elastyczny model pracy hybrydowej (ok. 20% czasu z nowoczesnych biur w Warszawie, Poznaniu lub Wrocławiu)., Prace przy zaawansowanym tech stacku (Databricks Lakehouse, Airflow, Azure)., Realny wpływ na architekturę i rozwój platformy danych w dużej skali., Pracę w doświadczonym, zgranym zespole inżynierów.
Obowiązki
Wymagania
Mile widziane
PythonPySparkSQLDatabricksApache AirflowAzure DevOpsGitpytest