Data Engineer

1 месяц назад


Алматы, Казахстан Prime Source Полный рабочий день

Требования:

​​​​​​Опыт работы в области разработки хранилищ больших данных не менее 2 лет; Знание концепций данных и аналитики (например, моделирование, ETL, инструменты отчетности, управление данными, хранение данных, структурированные и неструктурированные данные); Опыт работы с ETL/ELT системами (Informatica, Airflow, Dagster, Apache Nifi,Apache Spark, PXF), трансформация DBT; Опыт работы со стриминговыми сервисами обработки данных Apache Kafka, Rabbit MQ; Опыт использования инструментов трансформации данных (DBT, Spark, Python);

Опыт работы с реляционными СУБД ( Oracle, MS SQL Server \ Postgre SQL \ My Sql);

Опыт работы с нереляционными, колоночными БД(Greenplum, Vertica, Векторные БД, Clichouse,Scylla DB);

Опыт работы с платформами больших данных (например, Hadoop, HBase, ClickHouse, Druid, MemSQL, Hive, Minio);

Опыт интеграции с технологиями CDC (GoldenGate, Informatica, Debezium); Условия:

Офис в центре города; Оформление через ГПХ или ИП (3 месяца контракт).