データエンジニア at Ramp

職務内容

主な責任

• DBT、SQL、Python、Airflow、GitHubなどのツールをGoogle Cloud Platformで活用し、データウェアハウスの設計と管理におけるベストプラクティスを実施して複雑さとコストを削減します。
• さまざまなソースからのデータをクラウドデータウェアハウス（BigQuery）に転送するデータインジェストプロセスを設計および実行し、データの正確性とタイムリー性を確保します。
• Google Analytics、トランザクションデータベース、SFTPサーバー、APIやウェブフックを介してアクセスされる公開データセットなど、複数のデータソースをBigQueryに統合し、集中型データ管理をサポートします。
• クエリチューニング、スキーマ設計、リソース割り当てを通じてデータウェアハウスのパフォーマンスを最適化し、データ品質を監視して是正措置を実施します。
• データの整合性、セキュリティ、規制要件の遵守を確保するために、データガバナンスフレームワークを確立および維持します。
• ステークホルダーと協力してデータニーズを特定し、プロセスを文書化し、データ戦略実施に対する技術的ガイダンスを提供します。
• データワークフロー、統合プロセス、システム構成に関するドキュメントを作成および維持し、チームの知識共有と将来の拡張性をサポートします。
• データ処理能力を強化し、業務効率を向上させるための新しいツールや技術の評価に参加します。

求めるスキル・経験

• Google Cloud Platform（GCP）などのクラウドプラットフォームでのデータウェアハウス設計と管理に関する強力なバックグラウンドを持つ、データ戦略実施の実績ある経験。
• クラウド環境でのデータ変換、自動化、バージョン管理のためにDBT（Data Build Tool）、SQL、Python、Airflow、GitHubを活用する専門知識。
• BigQueryを使用したデータストレージ、クエリ、分析に関する強力なスキル、および外部データソースとの統合能力に関する知識。
• Google Analytics、トランザクションデータベース、SFTPサーバー、APIやウェブフックを介した公開データセットなど、多様なデータソースの統合経験。
• データウェアハウスのパフォーマンス最適化、データ品質の監視、データ関連の問題解決のためのソリューション実施に関する技術的スキル。
• データ分類、アクセス制御、データ規制の遵守を含むデータガバナンス原則の知識。
• データエンジニア、アナリスト、ビジネスステークホルダーを含むクロスファンクショナルチームと協力するための優れたコミュニケーションおよびコラボレーションスキル。
• チームの参照および監査目的のために、複雑なデータワークフローとシステム構成を明確に文書化する能力。
• 正確で信頼性の高いデータ処理結果を確保するための強力な問題解決能力と細部への注意力。
• クラウドコンピューティング（例：Google Cloud Professional Data Engineer）、データエンジニアリング、または関連分野の認定資格、およびデータパイプライン開発とクラウドベースの分析ツールの経験が望ましい。