具体的な業務内容
Databricksを活用したデータ基盤の構築・運用、データ分析基盤の整備を担当。データパイプライン開発や、Lakehouseアーキテクチャの設計・運用、データマート構築などを行い、社内外のデータ利活用を推進します。
■Databricks Lakehouse Platform上でのデータ基盤設計・開発・運用
■Delta Lakeを活用したデータレイク/データウェアハウスの構築・運用
■データパイプライン/バッチ処理/ストリーミング処理の開発
■ETL/ELTジョブの設計・実装(Apache Spark/Databricks Workflows)
■BIダッシュボード/データマート向けのデータ提供設計・最適化
■Databricksのユーザー権限管理、クラスター運用、パフォーマンスチューニングなど