데이터 엔지니어 at Logearn

직무 설명

주요 책임

• 블록체인 생태계에 맞춰 확장 가능한 데이터 웨어하우스 아키텍처를 개발 및 유지하며, 거래 데이터, 스마트 계약 로그, 온체인 메트릭의 효율적인 저장 및 검색을 보장합니다.
• 비트코인, 이더리움 및 신흥 블록체인 프로토콜을 포함한 여러 퍼블릭 체인에서 데이터를 통합하기 위한 ETL(추출, 변환, 로드) 프로세스를 설계하고 실행합니다.
• Apache Kafka, Flink 또는 Spark Streaming과 같은 기술을 사용하여 실시간 데이터 처리 파이프라인을 구현하고 블록체인 활동을 모니터링하며 시의적절한 분석 보고서를 생성합니다.
• 크로스 기능 팀과 협력하여 데이터 요구 사항을 식별하고 제품 개발 및 비즈니스 의사 결정을 지원하는 실행 가능한 통찰력을 제공합니다.
• 데이터 모델과 쿼리 성능을 최적화하여 블록체인 분석 애플리케이션의 고가용성과 낮은 지연 시간을 보장합니다.
• 블록체인 네트워크에서 트렌드, 이상 현상 및 패턴을 발견하기 위한 심층적인 데이터 분석을 수행하고 개선을 위한 전략적 권장 사항을 제공합니다.
• 복잡한 블록체인 데이터를 이해관계자에게 직관적이고 사용자 친화적인 방식으로 표시하기 위한 대시보드 및 시각화 도구를 개발합니다.
• 민감한 블록체인 정보를 처리하는 동안 데이터 보안 및 규제 표준 준수를 보장합니다.
• 블록체인 시스템 전반에 걸쳐 데이터 품질과 무결성을 유지하기 위한 데이터 거버넌스 프레임워크의 설계 및 구현에 참여합니다.
• 기존 인프라와의 원활한 통합을 보장하기 위해 블록체인 데이터 서비스에 대한 기술 지원 및 문제 해결을 제공합니다.

직무 요구 사항

• 블록체인 생태계를 위한 데이터 웨어하우스 구축 경험이 있으며, 오프라인 배치 처리와 실시간 데이터 스트리밍 기술에 대한 강력한 이해가 필요합니다.
• PostgreSQL, MySQL, MongoDB와 같은 SQL 및 NoSQL 데이터베이스 및 IPFS 또는 Filecoin과 같은 블록체인 특화 저장 솔루션에 대한 전문 지식이 필요합니다.
• Apache Hadoop, Spark 또는 Flink와 같은 데이터 처리 프레임워크에 능숙하며, 블록체인 데이터를 위한 ETL 파이프라인 설계 경험이 있어야 합니다.
• 작업 증명, 지분 증명 및 샤딩 기술을 포함한 블록체인 프로토콜 및 합의 메커니즘에 대한 지식이 필요합니다.
• 대규모 데이터 세트를 위한 데이터 모델링, 쿼리 최적화 및 성능 튜닝 경험이 있는 강력한 분석 능력이 필요합니다.
• Tableau, Power BI 또는 블록체인 분석을 위한 맞춤형 대시보드와 같은 플랫폼을 사용하여 데이터 시각화 도구를 개발하고 유지할 수 있는 능력이 필요합니다.
• 제품 팀, 엔지니어 및 이해관계자와 효과적으로 협력하여 데이터 기반 솔루션을 제공하기 위한 탁월한 커뮤니케이션 기술이 필요합니다.
• 블록체인 환경에서 데이터 분석 팀을 구성하고 훈련시킨 경력이 있는 팀 리더십 및 멘토링 경험이 필요합니다.
• 블록체인 데이터 관리를 위한 데이터 거버넌스, 규정 준수 및 보안 모범 사례에 대한 이해가 필요합니다.
• 정확하고 신뢰할 수 있는 블록체인 데이터 분석 결과를 보장하기 위한 강력한 문제 해결 능력과 세부 사항에 대한 주의가 필요합니다.
• 컴퓨터 과학, 데이터 과학 또는 관련 분야의 학사 또는 석사 학위와 블록체인 기술 또는 데이터 엔지니어링 인증서가 우대 사항입니다.
• AWS, Azure 또는 Google Cloud와 같은 클라우드 플랫폼을 사용하여 블록체인 데이터 인프라를 배포하고 관리한 경험이 필요합니다.
• Python, Java 또는 Go와 같은 프로그래밍 언어에 대한 지식과 블록체인 데이터 도구 및 애플리케이션 개발 경험이 필요합니다.
• 엄격한 기한 내에 고품질의 블록체인 데이터 서비스를 제공하기 위해 독립적으로 그리고 팀의 일원으로 작업할 수 있는 능력이 필요합니다.
• 여러 데이터 프로젝트를 동시에 관리하고 결과를 제시간에 제공하기 위한 강력한 조직 능력이 필요합니다.