데이터 엔지니어 at OP3N

직무 설명

주요 책임

• Cloud Firestore 내 기존 데이터 인프라와 가용성에 대한 포괄적인 감사를 수행하여 비효율성과 최적화 기회를 식별합니다.
• Snowflake와 같은 새로운 데이터 웨어하우스 솔루션을 지정 및 구현하여 현재 인프라를 대체하거나 개선하며 확장성, 성능 및 비용 효율성을 보장합니다.
• 제품 팀과 협력하여 증가하는 사용자 데이터 양과 진화하는 비즈니스 요구를 처리할 수 있는 확장 가능한 데이터 인프라 및 분석 프레임워크를 개발합니다.
• 엔지니어링 팀과 협력하여 여러 소스에서 효율적인 데이터 수집, 변환 및 쿼리를 가능하게 하는 데이터 파이프라인을 설계 및 배포합니다.
• 새로운 기술을 탐색하고 기존 프로세스를 개선하여 데이터 품질, 워크플로우 신뢰성 및 시스템 확장성을 지속적으로 모니터링하고 개선합니다.
• 이해관계자에게 성능 보고서와 통찰력을 제공하여 데이터 인프라 개선의 기능과 영향을 입증합니다.
• 새로운 제품 및 기능에 대한 데이터 라이프사이클을 소유하며 데이터 소스 정의, 웨어하우스 아키텍처 설계 및 보고 메커니즘 수립을 포함합니다.
• 기술 요구 사항과 비즈니스 우선순위를 균형 있게 조정하여 데이터 시스템이 조직 목표와 일치하도록 보장합니다.
• 데이터 거버넌스 프레임워크 평가를 주도하고 규제 표준 및 내부 정책 준수를 보장합니다.
• 아키텍처 다이어그램, 프로세스 흐름 및 기술 사양을 포함한 데이터 시스템에 대한 문서를 개발하고 유지합니다.

직무 요구 사항

• Cloud Firestore 및 Snowflake 기술에 대한 강력한 배경을 바탕으로 클라우드 기반 데이터 인프라 설계 및 관리 경험이 입증된 자.
• 확장 가능한 분석 솔루션을 지원하기 위한 데이터 웨어하우징 개념, ETL 프로세스 및 데이터 파이프라인 아키텍처에 대한 고급 지식.
• 비즈니스 요구 사항을 기술 사양으로 전환하기 위해 제품 및 엔지니어링 팀과 효과적으로 협력할 수 있는 능력.
• 데이터 시스템을 평가하고 병목 현상을 식별하며 데이터 기반 개선을 제안할 수 있는 강력한 분석 능력.
• 데이터 품질 보증, 워크플로우 자동화 및 성능 최적화 기술에 대한 경험.
• 비기술적 이해관계자에게 기술적 통찰력을 전달하고 프로세스를 명확하게 문서화할 수 있는 우수한 커뮤니케이션 기술.
• 데이터 분석 및 보고를 지원하기 위한 SQL, 클라우드 컴퓨팅 플랫폼 및 데이터 시각화 도구에 대한 숙련도.
• 세부 사항에 주의를 기울이고 기한을 준수하면서 여러 프로젝트를 동시에 관리할 수 있는 능력.
• 빠르게 변화하는 환경에서 확장 가능한 데이터 솔루션을 제공한 애자일 방법론 경험과 실적.
• 규정 준수 및 데이터 무결성을 보장하기 위한 데이터 거버넌스 원칙 및 보안 모범 사례에 대한 지식.
• 데이터 시스템의 기술적 문제를 식별하고 해결하기 위한 강력한 문제 해결 능력과 적극적인 접근 방식.
• 데이터 인프라 배포 및 관리를 위한 클라우드 네이티브 기술 및 컨테이너화 도구(예: Docker, Kubernetes)에 대한 경험.
• 독립적으로 작업하고 개념화부터 배포까지 복잡한 데이터 프로젝트를 소유할 수 있는 능력.
• 동적인 작업 환경에서 효과적으로 작업 우선순위를 정할 수 있는 우수한 시간 관리 기술.
• 데이터 처리 작업 및 시스템 유지 관리를 자동화하기 위한 스크립팅 언어(예: Python, Bash)에 대한 숙련도.