どんな仕事か: プラットフォーム推進室では、デジタルサービスの読者の行動ログや記事データなど、1日あたり450GB以上のデータをリアルタイムに蓄積・分析するデータ基盤を内製で開発しています。Google Analytics や Adobe Analytics ではなく独自の計測ツールを内製しているため、フロントエンドからバックエンド、インフラまで幅広い経験ができます。
さらにデータ基盤を活用した次世代マーケティングオートメーションツールを内製、推進しています。

＜具体的な業務＞
・データ連携システムの開発、運用保守
・データ基盤戦略の検討、推進
・データ品質向上のための仕組みの実装
・データマネジメント
・ビッグデータを扱う新技術選定、評価や構築
・データ活用促進のためのツールの開発、導入

■技術スタック
言語：Node.js, Python, Go, Rust, Java, TypeScript
インフラ：AWS （ECS, SQS, Kinesis, Lambda, S3 etc）, Google Cloud（Cloud Composer, Cloud PubSub, Dataflow, Data Stream, Dataform etc）, Fastly Compute
データベース：Redshift, BigQuery, MySQL, Elasticsearch, SingleStore
分析ツール： Redash, Kibana, Jupyterhub, Superset

■開発環境
・構成管理: GitHub,GitHub Actions, Terraform Cloud
・チケット管理: Notion, Backlog, Github Projects
・ドキュメント: Notion, Qiita Team, Google Drive
求められるスキルは: 必須・Go, Python 等の何らかのプログラミング言語を利用した開発経験
・AWSまたはGoogle Cloud 環境での開発経験
・Redshift, BigQuery, PostgreSQL, MySQLなど、データベースおよびデータウェアハウス関連の運用経験

歓迎・大規模データ処理基盤の運用
・データ収集基盤の構築経験
・バッチ及びストリーミング処理の実装・運用経験
・Airflow、dbt、Dataform 等のオーケストレーションツールの実装・運用経験
・Terraform等、Infrastructure as Codeの実装経験
・MAツール、可視化BIツール等の導入・利用経験
・プロジェクトマネジメント経験
・SQS, Kinesis, Cloud Pub/Subなどメッセージキュー関連の理解
雇用形態は: 正社員
どこで働くか: 東京都
給与はどのくらい貰えるか: 600万円～ 999万円

データエンジニア

データベースエンジニア