Описание вакансии
В качестве инженера хранилища данных вы будете играть ключевую роль в анализе бизнес-требований для промежуточной платформы данных и построении хранилищ данных для обеспечения надежной поддержки различных бизнес-операций. Ваши обязанности будут включать участие в анализе источников данных и обеспечение беспрепятственной интеграции данных между платформой больших данных и другими бизнес-системами. Кроме того, вам будет поручено проектирование хранилищ данных и разработка процессов ETL на основе технологических платформ больших данных. Важной частью вашей роли будет исследование соответствующих технологий для оптимизации рабочих процессов разработки больших данных и планирование приложений для платформы больших данных.
Ключевые обязанности
- Анализировать бизнес-требования для промежуточной платформы данных и строить хранилища данных для обеспечения поддержки данных
- Участвовать в анализе источников данных и выполнять интеграцию данных между платформой больших данных и бизнес-системами
- Проектировать хранилища данных и разрабатывать процессы ETL на основе технологических платформ больших данных
- Исследовать соответствующие технологии для оптимизации рабочих процессов разработки больших данных и планировать приложения платформы больших данных
Требования к кандидату
- Диплом бакалавра или выше в области компьютерных наук или смежной области
- Опыт работы в разработке хранилищ данных от 3 лет, предпочтительно с опытом построения интернет-хранилищ данных
- Сильные навыки программирования, владение написанием и оптимизацией Hive-SQL, знакомство с распространенными инструментами ETL и знание хотя бы одного языка программирования (Java, Python, Shell)
- Опыт работы с распределенными вычислительными фреймворками или фреймворками потоковой обработки, понимание моделирования хранилищ данных и глубокие знания структур данных и проектирования алгоритмов
- Экспертиза в проектировании моделей хранилищ данных в среде больших данных и владение многомерным моделированием OLAP
- Опыт построения платформ данных (разработка данных, управление, активы и т. д.)
- Сильное чувство ответственности, отличные коммуникативные навыки и командный дух
- Опыт разработки в реальном времени с использованием Spark Streaming, Flink и т. д.
Предпочтительные квалификации
- Опыт проектирования архитектуры серверных сервисов для социальных продуктов
- Знание экосистемы и технологий блокчейна
- Образование в области статистики/математики с опытом обработки, анализа и добычи массивных данных
Условия
Конкурентоспособный пакет компенсаций и комплексные льготы будут предоставлены в зависимости от опыта и квалификации.
