Data Engineer
1 месяц назад
Алматы, Казахстан
Prime Source
Полный рабочий день
Требования:
Опыт работы в области разработки хранилищ больших данных не менее 2 лет; Знание концепций данных и аналитики (например, моделирование, ETL, инструменты отчетности, управление данными, хранение данных, структурированные и неструктурированные данные); Опыт работы с ETL/ELT системами (Informatica, Airflow, Dagster, Apache Nifi,Apache Spark, PXF), трансформация DBT; Опыт работы со стриминговыми сервисами обработки данных Apache Kafka, Rabbit MQ; Опыт использования инструментов трансформации данных (DBT, Spark, Python);Опыт работы с реляционными СУБД ( Oracle, MS SQL Server \ Postgre SQL \ My Sql);
Опыт работы с нереляционными, колоночными БД(Greenplum, Vertica, Векторные БД, Clichouse,Scylla DB);
Опыт работы с платформами больших данных (например, Hadoop, HBase, ClickHouse, Druid, MemSQL, Hive, Minio);
Опыт интеграции с технологиями CDC (GoldenGate, Informatica, Debezium); Условия:
Офис в центре города; Оформление через ГПХ или ИП (3 месяца контракт).