Описание работы:
Инженер-программист, Data Cloud
Проектирование, разработка и оптимизация высокопроизводительных и масштабируемых платформ для работы с данными с акцентом на обработку потоковых данных, большие объемы данных и облачную инфраструктуру
Внедрение и поддержка автоматизации инфраструктуры и самообслуживания с использованием Terraform, обеспечение надежных и воспроизводимых сред для разработки и производства, а также создание надежных CI/CD-конвейеров
Создание бесшовных интеграций между Data Cloud и различными реляционными и NoSQL OLTP-базами данных
Проектирование и создание фреймворков и абстракций для ускорения разработки конвейеров данных с учетом лучших практик инженерии данных
Разработка и поддержка решений для наблюдаемости, безопасности и управления данными для обеспечения высокого качества и надежности конвейеров данных
Требования к работе:
Опыт работы от 3 лет в качестве инженера платформы данных, инженера-программиста или инженера инфраструктуры с практическими навыками создания и поддержки облачных платформ данных
Солидный опыт работы с сервисами AWS, хорошее понимание облачной архитектуры и владение Terraform для развертывания и управления облачной инфраструктурой
Опыт создания конвейеров потоковых данных с использованием Apache Flink, Apache Kafka, Spark Structured Streaming или аналогичных технологий
Знание современных архитектур и экосистем data lakehouse, таких как Kafka, Flink, Spark, Databricks, Snowflake, DBT, Airflow, Debezium, Delta/Iceberg, а также уверенное владение Python/Java и SQL
Опыт работы с сетевыми и безопасностными концепциями в AWS, включая VPC, подсети, маршрутизацию, группы безопасности, IAM и т.д.
Дополнительные преимущества:
Опыт или интерес к экосистеме криптовалютных технологий
Опыт работы с различными блокчейн-технологиями будет плюсом
Опыт работы в SaaS или FinTech-компании
Преимущества:
/
