- なぜ募集しているのか
- 弊社からの入社実績20名以上あり 部門強化のため増員
退職金制度あり 平均残業20～30時間程度
平均年齢34.3歳 平均年収7,740千円
募集背景
楽天市場は、出店している店舗様向け（B2B）およびコンシューマ向け（B2C）サービスの拡充を目指し、新たなメンバーを募集しています。私たちは、HadoopやGoogle Cloud Platformをデータ・ストレージとして活用し、Python、Spark、Kafkaを駆使してデータを効率的に格納・処理しています。
今回の募集は、巨大な楽天市場のトランザクションデータを扱うデータパイプラインの拡張と最適化を担うデータエンジニアを対象としています。このポジションは、楽天市場における重要な意思決定を支えるデータを提供し、ビジネスの成長とサービスの向上に直結する非常に重要な役割を果たします。 - どんな仕事か
-
ビジネスサポート開発部では、楽天市場が店舗様に提供しているRMS（ASPサービス）の一部を担当。さらに、楽天市場を運営するためのビジネススタッフを支える様々なアプリケーションの開発と運用。私たちのミッションは、店舗様が効率的にビジネスを展開できるよう、最先端の技術を駆使して高品質なサービスを提供することです。
ECビジネスデータアナリティクス&プラットフォーム課では、楽天市場の巨大なトランザクションデータを支えるデータ基盤を構築しています。出店ショップ数5万、商品数3億、年間流通額3兆円超という膨大なデータを扱い、データのハブとしてビジネスの意思決定やデータ活用をサポートしています。また、楽天スーパーSALEや大型イベントにおける日本最大級のトラフィックデータを処理し、安定的なシステム提供とサービス品質の継続的な向上に努めています。
業務内容
・Spark、Hive、Kafka、Spark-Streaming、Hadoop、Google Cloud Platformなどのデータ処理フレームワークやテクノロジーを用いて、大規模なバッチデータパイプラインを構築を行い、データパイプラインを活用して、楽天市場のガイドラインに沿ったデータチェック、顧客獲得、その他の主要なビジネスパフォーマンス指標についての重要な意思決定データの提供を行います
・データパイプライン管理：大規模なeコマースプラットフォームのデータパイプラインを構築・維持
・自動化：データ取り込みプロセスを自動化し、手動データ処理を削減
・クラウド移行：オンプレミスのデータインフラをGoogle Cloud Platformに移行
・アプリケーション管理：大量のデータを取り込み・処理するプラットフォーム上のアプリケーションを管理
・複雑なデータストレージおよび取得問題の解決：ビッグデータパイプラインにおける複雑なデータストレージおよび取得問題を解決し、明確に説明します
・本番環境でのアプリケーションのデバッグと保守：ロギング、アラート、モニタリングツールを使用して本番環境でのアプリケーションをデバッグおよび保守します
・チームおよびクロスチームメンバーとの効果的なコラボレーション：他のチームおよびクロスチームメンバーと効果的に協力します
・チームリーダーシップ：ソフトウェアエンジニアのチームをリードし、プロジェクト目標を達成 - 求められるスキルは
-
必須 必須要件：
・Hadoop、Spark、Kafkaアプリケーション開発、運用経験
・PythonまたはJava／Scalaでの開発経験
・5年以上のデータエンジニア経験
・Google Cloud PlatformやBigQueryの開発、運用経験
・SQLに関する高度な知識とリレーショナル データベースの経験
・データパイプライン、データセットの構築とパフォーマンス最適化の経験
・データモデリングの経験
・Linuxでの開発経験
・データ分析：データ処理と変換のための強力な分析スキル
・プロジェクト管理：プロジェクトを管理し、高品質なソリューションを提供する能力
・チームリーダーシップ: ソフトウェアエンジニアリングチームをリードし、指導した経験
・日本語の読み書き、会話（ネイティブレベル）が出来ること
歓迎要件：
・ビッグデータを活用した開発経験
・データベースの運用経験、最適なパフォーマンスチューニングの経験
・Docker、Kubernetesなどのインフラマネージメントの経験
・DevOps／Micro service アーキテクチャに対する深い理解と経験
・Jenkinsもしくはその他のCI技術を使った運用経験
・Scrum／Agile開発経験
その他：
勤務地に関する補足
大阪もしくは東京
英語要件に関する補足
TOEIC 800点以上歓迎 開発環境
Python／Hadoop／Hive／Spark／Kafka／Google Cloud Platform
- 雇用形態は
- 正社員
- どこで働くか
- 東京都 / 大阪府
- 給与はどのくらい貰えるか
- 900万円 ～ 1149万円
NEW
掲載期間24/12/02～24/12/15
求人No.GRAND-241125KNDR
