- なぜ募集しているのか
- 弊社からの入社実績20名以上あり 部門強化のため増員
退職金制度あり 平均残業20～30時間程度
平均年齢34.3歳 平均年収7,740千円
募集背景
今回の募集は、巨大な楽天市場のトランザクションデータを扱うデータパイプラインの拡張と最適化を担うデータエンジニアを対象としています。このポジションは、楽天市場における重要な意思決定を支えるデータを提供し、ビジネスの成長とサービスの向上に直結する非常に重要な役割を果たします。
私たちは、経験豊富なリードソフトウェアエンジニアを求めています。理想的な候補者は、ビッグデータ技術、クラウドプラットフォーム、データ移行に強いバックグラウンドを持ち、チームをリードし、プロジェクトを管理し、運用効率とコスト削減を推進する高品質なソリューションを提供する能力を持つ方です。 - どんな仕事か
-
ECビジネスデータアナリティクス&プラットフォーム課では、楽天市場の巨大なトランザクションデータを支えるデータ基盤を構築しています。出店ショップ数5万、商品数3億、年間流通額3兆円超という膨大なデータを扱い、データのハブとしてビジネスの意思決定やデータ活用をサポートしています。また、楽天スーパーSALEや大型イベントにおける日本最大級のトラフィックデータを処理し、安定的なシステム提供とサービス品質の継続的な向上に努めています。
業務内容
・Spark、Hive、Kafka、Spark-Streaming、Hadoop、Google Cloud Platformなどのデータ処理フレームワークやテクノロジーを用いて、大規模なバッチデータパイプラインを構築を行い、データパイプラインを活用して、楽天市場のガイドラインに沿ったデータチェック、顧客獲得、その他の主要なビジネスパフォーマンス指標についての重要な意思決定データの提供を行います
・データパイプライン管理：大規模なeコマースプラットフォームのデータパイプラインを構築・維持
・自動化：データ取り込みプロセスを自動化し、手動データ処理を削減
・クラウド移行：オンプレミスのデータインフラをGoogle Cloud Platformに移行
・アプリケーション管理：大量のデータを取り込み・処理するプラットフォーム上のアプリケーションを管理
・複雑なデータストレージおよび取得問題の解決：ビッグデータパイプラインにおける複雑なデータストレージおよび取得問題を解決し、明確に説明します
・本番環境でのアプリケーションのデバッグと保守：ロギング、アラート、モニタリングツールを使用して本番環境でのアプリケーションをデバッグおよび保守します
・チームおよびクロスチームメンバーとの効果的なコラボレーション：他のチームおよびクロスチームメンバーと効果的に協力します
・チームリーダーシップ：ソフトウェアエンジニアのチームをリードし、プロジェクト目標を達成
- 求められるスキルは
-
必須 必須要件：
・Hadoop、Spark、Kafkaアプリケーション開発、運用経験
・PythonまたはJava／Scalaでの開発経験
・5年以上のデータエンジニア経験
・Google Cloud PlatformやBigQueryの開発、運用経験
・SQLに関する高度な知識とリレーショナル データベースの経験
・データパイプライン、データセットの構築とパフォーマンス最適化の経験
・データモデリングの経験
・Linuxでの開発経験
・データ分析：データ処理と変換のための強力な分析スキル
・プロジェクト管理：プロジェクトを管理し、高品質なソリューションを提供する能力
・チームリーダーシップ: ソフトウェアエンジニアリングチームをリードし、指導した経験
・日本語の読み書き、会話（ビジネスレベル）が出来ること
歓迎要件：
・ビッグデータを活用した開発経験
・データベースの運用経験、最適なパフォーマンスチューニングの経験
・Docker、Kubernetesなどのインフラマネージメントの経験
・DevOps／Micro service アーキテクチャに対する深い理解と経験
・Jenkinsもしくはその他のCI技術を使った運用経験
・Scrum／Agile開発経験
・日本語の読み書き、会話（ビジネスレベル）が出来ること
勤務地に関する補足
大阪もしくは東京
英語要件に関する補足
TOEIC 800点以上
歓迎 働く環境
開発環境
Python／Hadoop／Hive／Spark／Kafka／Google Cloud Platform - 雇用形態は
- 正社員
- どこで働くか
- 東京都 / 大阪府
- 給与はどのくらい貰えるか
- 900万円 ～ 1149万円
掲載期間25/11/30～25/12/13
求人No.GRAND-251014KNDD
