具体的な業務内容
データエンジニア(生活者データ基盤開発)◆2兆レコードを超えるデータを持つプロダクト開発
博報堂DYグループが提供する国内最大級のデータマネジメントプラットフォーム(DMP)を開発・運用する開発チームのデータ基盤構築エンジニアの募集です。
■業務概要
博報堂DYグループであるデジタル・アドバタイジング・コンソーシアム株式会社から当社に組織とプロダクトが移管されたことで、博報堂グループ全体で利活用できる状態になりました。個別最適化されていたものから「統合マーケティングプラットフォーム」として再検討するフェーズの構想設計から関わっていただきます。
■業務詳細:
このデータマネジメントプラットフォーム(DMP)のバックエンド・データ基盤構築を担当します。インターネット上での消費者行動や嗜好に関する大規模なデータを収集・分析し、マーケティングや広告に活用していますが、そのアプリケーションのバックエンド側とデータ基盤の設計・構築・運用を担当していただきます。
<直近の主な業務>
◎バックエンド・データ基盤の設計・構築・運用
◎BigQueryに移行するプロジェクトの推進
◎クライアントの要件に応じたレポート作成
◎自社独自の推定処理(性別・興味関心等)の開発・改善・精度検証
◎データの品質管理・保守・最適化
◎データのセキュリティ・プライバシーの確保
■開発言語・フレームワーク:
◎画面系:JavaScript、PHP
◎バッチ関連:Python、ShellScript、luigi、digdag
◎データ処理:SQL
◎バックエンド:Rust、Scala
■扱っているデータ:
◎2兆レコードを超えるオンライン行動データ
◎アプリ行動ログ
◎郵便番号単位の位置情報データ
◎各種2ndパーティデータ(金融・購買データ・アンケートパネル・メディアデータ・BtoBデータ等)
◎上記をもとにして、特許取得技術も活用した各種推定データ(興味関心・デモグラフィック・購買傾向・ライフスタイル等)
■歓迎要件:
◎スクラムの理解
◎要件定義、設計、開発、テスト、デプロイ、運用保守の一連の経験
◎Gitを用いた複数名での開発経験
チーム/組織構成