具体的な業務内容
【渋谷】データエンジニア(ポテンシャル)基盤構築・運用/当社全サービスのデータ活用推進/フレックス
当社が運営する全サービスのデータを全社横断的に管理・運用し、データ活用を推進するためのデータ基盤構築・運用を担って頂きます。
■業務内容
◎GCP上でのデータ活用基盤開発、保守運用
◎ワークフローエンジンを用いたETL処理の開発、保守運用
◎Pythonを用いた業務自動化ツールの開発
◎データ蓄積観点からのデータベース設計およびテーブル設計のレビュー
◎データドリブン経営を実現するためのデータマネジメント体制構築
◎Terraformを用いたデータ基盤インフラのIaC化およびインフラ管理
■扱うデータ
◎自社サイトのアクセスログデータ(ビュー、クリック、スクロール)
◎顧客の属性データ、顧客の時系列情報
◎自社社員の行動(架電履歴など)データ
◎WEB広告(主にgoogle系)の配信成果データ等
◎テキストデータ(QAサイトのデータ、求人票のデータ、経歴データなど)
◎音声データ(通話)
■使用技術
GCP(BigQuery、GCS、CloudRunFunctions、CloudRun、CloudComposer、Dataform、Dataplex)/AWS(EC2、ECS、Lambda、S3、RDS、Sagemaker)/ワークフローエンジン(Airflow)/Python/SQL/Git/Terraform/Fivetran
〈開発環境〉
複数モニター/外付けキーボード支給/GitHub Copilotのライセンス付与
■ポジションの魅力
◎データ基盤自体はBigQueryを中心としたGCPで構築していますが、データソースとなる社内システムは全てAWSで構築されているため、GCP/AWS両方の知識や経験を身に付けることができます。
◎事業部長やマーケティング責任者といった意思決定層や、セールス、マーケターなど他職種ともコミュニケーションを取りながら業務を進める機会が多く、エンジニアの立場から事業をドライブさせていくことができます。
◎RDBに格納された顧客データやアクセスログ以外にも、事業企画やマーケティングで使用するSaaSデータ、テキストデータや音声データといった非構造化データを扱うことができ、新規事業立ち上げと事業成長により、扱うデータの種類やデータ量は年々増加しています。
変更の範囲:会社の定める業務
チーム/組織構成