Аналитик данных

Текущий статус/должность: Аналитик данных.

Мои компетенции и опыт

Ноябрь 2023 — по настоящее время

Senior data analyst
Достижения:
- Произвела ревизию легаси, в ходе чего обнаружились проблемы изолированных данных. По результатам исследований были инициированы масштабные изменения на уровне архитектуры продуктов.
- Скорректировала существующие методологии расчета ключевых показателей
- Сократила количество ad-hoc на 70%

Обязанности:
- Участие в трансформации аналитической платформы и построение процессов с нуля
- Автоматизация отчетности
- Сбор требований и разработка системы дашбордов
- Написание алертинга на рассылку отчетности
- Написание технической документации к отчётам и процессам
- Контроль качества собираемых данных
- Менторинг сотрудников
- Взаимодействие с заказчиками, владельцем продукта и командой разработки (DA, DEV, DE)

Стек технологий: Airflow, ClickHouse, Postgres, Superset, python

Сентябрь 2022 — сентябрь 2023

Middle data analyst
Достижения:
- Разработан мониторинг качества входящих данных с алертингом в telegram-канал, который позволил сократить время на обнаружение проблем с входящими данными
- Перенесен расчет 5 витрин c агрегированной информацией на dbt
- Разработан алгоритм кластеризации магазинов для сервиса.
- Проведение внутренних обучающих семинаров.

Обязанности:
- Разведочный анализ данных, исследование источников данных и качества данных в них;
- Разработка дашбордов на Redash/Superset;
- Управление ETL процессами (оркестрация через Airflow): настройка агрегатов для дашбордов и пайплайнов для загрузки данных во внутреннее хранилище;
- Мониторинг результатов загрузки, анализ ошибок, коммуникация по выявленным ошибкам обработки данных;
- Выполнение ad-hoc запросов;
- Написание проектной документации;
- Оптимизация SQL-запросов, рефакторинг python-кода.

Стек технологий: Airflow, ClickHouse, Redash, Postgres, dbt, Superset, Docker, python
 

Ноябрь 2019 — сентябрь 2022

Middle data analyst
Достижения:
- Разработала 3 bi-платформы для мониторинга моделей машинного обучения на библиотеке dash (python)
- Сократила время детектирования некорректного поведения в проме, разработав оперативный мониторинг
- На мониторинг поставлено более 30 скоринговых моделей (корпоративный и розничный сегмент);
- Подготовлены 2 формы отчетности для ЦБ РФ в рамках перехода на ПВР.

Обязанности:
- Работа с DWH: оперирование большими объемами данных (hadoop), проектирование витрин данных для мониторинга скоринговых моделей;
- Написание скриптов (на pyspark) для постановки на Airflow для регламентного обновления источников данных;
- Разработка архитектуры платформы для анализа и мониторинга данных, написание кода для платформы мониторинга (на библиотеке dash);
- Написание статистических тестов для мониторинга моделей (GINI, PSI, SSI и др.);
- Выполнение ad-hoc запросов, подготовка регулярной отчетности;
- Анализ требований заказчика, написание документации, подготовка БТ, написание артефактов для вывода в пром;
- Менторство новых сотрудников

Стек технологий: SQL, pyspark, python (pandas, numpy, seaborn, plotly, dash), R, hadoop, html/css, git

Сентябрь 2018 — октябрь 2019

Junior data analyst

- Построение моделей прогнозирования оттока клиентов
- Антифрод анализ
- Разметка данных
- Презентация результатов заказчику

Стек технологий: SQL, python