具体的な業務内容
【フルリモート可】データエンジニア(データ分析プラットフォーム導入PJT)定/地方在住者歓迎
【フルリモート可/上流工程多数/年4回査定/研修制度充実/文系歓迎/自社サービスである「Lake house」のプラットフォーム導入プロジェクト】
ビッグデータやデータエンジニアリングの分野について、ユーザが抱える課題への提案や支援を行うため、一緒に事業を推進いただけるエンジニアを募集しています。
■案件について:
<概要>
「Lakehouse」プラットフォーム導入にあたり、既存環境からの移行にともなう最適な設計や構築作業、新規導入の際の導入支援、機械学習モデル運用における内製化支援を行います。データAIプラットフォームを通したデータソースの特定、データ収集やデータ統合、パターンの特定や分析、仮説検証、モデル構築などデータの可視化等々、エンジニアの学びたい技術や目指すキャリアに応じて業務をお任せします。
※変更の範囲:会社の定める業務
<チーム体制>
・PM2名
・データエンジニア3名 ※当ポジション
・インフラエンジニア1名
<事例紹介>
・データマネジメントのコンサルティングやロードマップ策定支援
・データマネジメントプラットフォームの導入提案、PoC、PoV実施
・データマネジメントプラットフォームの要件定義、設計、構築
■開発環境
言語:Python,SQL,Q言語
インフラ:Microsoft Azure,AWS
データプラットフォーム:Databricks
可視化ツール:Tableau,PowerBI
ソースコード管理:GitHub
■業務の進め方
案件開始〜2週間
・データプラットフォームやプロダクト周辺のクラウド設計、構築(AzureやAWS)
・現状のデータの中身やフォーマットについてヒアリング
・Databricksを活用する計画について提案、データ内容や進め方に関する意見交換
1か月〜2か月目
・データ利活用に向けた分析基盤のインフラ構築と整備(Databricks環境の構築等)
・データ利活用に向けたデータ整形とプロセスの整備
※最終的に「新規のデータが発生した際にお客様側でデータ追加・調整・再構成等が出来る状態」にするための整備
2か月〜3か月目
・ダッシュボードの試作
・納品、仕様の説明や利活用についてお客様への説明
チーム/組織構成