Работала в 1 компании   2 года 4 месяца

IT

Data Engineer

Soley Gmbh

IT

2 года 3 месяца

04.2022 - по настоящее время

Responsibilities:

  • Establish development processes
  • Refine architecture of the library together with architect and peer engineers
  • Breakdown and estimate tasks / user stories
  • Conduct hands-on trainings for users of the library – Data Analysts team
  • Refactored legacy code into modular system of the internal library
  • Adjust existing automated ETL pipelines for customer`s needs
  • Set up release pipelines for new projectsOrganize extraction processes in edge-case scenarios

Key achievements:

  • Applied optimizations to existing calculations by avoiding repetitive calculations and caching results
  • Improved testing framework to allow more granular test cases
  • Setup scheduled release process with preservation of user-generated data
  • Defined edge cases for data provision and adjusted data extraction pipelines

Ключевая информация

Programming Languages:

  • Python
  • SQL


Azure cloud services:

  • Azure Databricks
  • Azure DevOps
  • Azure Data Factory
  • Azure Storage
  • Azure Pipelines

Relational databases:

  • Microsoft SQL Server
  • PostgreSQL

Python libraries:

common: Pandas, NumPy, Matplotlib

data scraping libraries: Scrapy, BeautifulSoup, WebDriver

Development Methodologies:

Scrum/Kanban Agile

Tools:

  • Git
  • Asana
  • Jupyther Notebooks
  • Google Colab
  • VisualStudio Code
  • Microsoft Excel

Училась в 1 заведении

Харківський національний університет імені В.Н. Каразіна

Соціологія

Харків, 2017

Владеет языками

Английский

свободно

Может проходить собеседование на этом языке

Может проходить собеседование на этом языке

Курсы, тренинги, сертификаты

Exam DP-203: Data Engineering on Microsoft Azure

2024

Марина

Data Engineer

Киев

32 года

Активно ищет работу

полная занятость

Обновлено 3 недели назад