ОБЯЗАННОСТИ: • Разработка крупномасштабных структур данных и конвейеров для организации, сбора и стандартизации данных, которые помогут генерировать инсайты и удовлетворять потребности в отчетах. • Написание процессов ETL (Extract/Transform/Load), разработка системы баз данных и инструментов для аналитической обработки в режиме реального времени и в автономном режиме. • Создание витрины данных и модели данных. • Интеграция данных из различных источников (Oracle, Postgres, Flat Files и т. д.), проверка их соответствия стандартам качества данных и доступности, в частности, для Master Data Management. • Анализ текущих сред баз данных для определения и оценки критических мощностей, рекомендация решений. ОБЯЗАТЕЛЬНЫЕ ТРЕБОВАНИЯ: • Развитые навыки моделирования данных. • Опыт настройки производительности запросов БД, продвинутые знания программирования SQL. • Опыт сбора данных, их обработкаи подготовки и трансформации. • Опыт моделирования data warehousing / dimension, отчетности и бизнес-аналитики. • Глубокое знание работы RDBMS (Oracle и Postgres), системы NoSQL (Cassandra, Couchbase, Mongo). • Опыт работы с bash shell scripts, утилитами UNIX и командами UNIX. Практические знания баз данных MPP/Columnar (Redshift / Snowflake). • Профессиональное владение технологией облачных данных в стеке технологий AWS (EMR, S3, Redshift, TEZ, HIVE, Presto, Spark, Data Pipelines, DMS, EC2, SWF, Postgres RDS, Postgres Aurora, Qubole, DynamoDB). |