- どんな仕事か
-
【日本最大のオンラインサービス提供企業(グローバル企業傘下)でのデータエンジニア】
データ活用の強化のために新たに発足するデータマネジメントポジションを、関係チームと協力しながらリードしていただきます。
【実際の業務内容】
既存データ関連システムの品質改善、Data Reliabilityの向上
データパイプライン、ワークフロー、およびそれらが稼働するシステムの信頼性強化
データ品質(即時性、完全性、一貫性)の強化
その他、下記を含むデータマネジメントの戦略の策定とロードマップの遂行
利用可能データの拡大
画像・動画、リアルタイム推薦に必要な情報、など価値を生むデータソースの開拓とData Lakeの拡充
データ利用者やシステム担当者などステークホルダーとの調整
社内データのガバナンス整備/準拠、セキュリティ・プライバシーポリシーへの準拠
社内の分析、機械学習用途データのガバナンス策定と推進 データパイプライン(ETL)の設計、実装、実装サポート
AI/BIチームが実装するパイプラインの開発生産性の向上
パイプライン処理、ワークフローの実装
【使っているツール】
データベース:BigQuery, MySQL(AWS Aurora), DynamoDB, ElasticSearch
データ処理:Google Cloud Dataflow, Cloud PubSub, Apache Airflow, Fluentd, Fluent-Bit, Embulk, Digdag, etc
BIツール:Tableau, redash
構成管理:Terraform
開発、その他:Github, Slack, JIRA
G Suite 各種ツール:Google SpreadSheet / Google Slide
- 求められるスキルは
-
必須 (1)データ処理におけるテクニカルスキル
SQL言語の知識、技能
Python/Ruby/Java/Scala/Goいずれかの業務での開発経験
ストリーム/バッチのデータ処理経験
RDB以外のデータベース利用経験
(2)WebApp開発の知識、スキル
一般的なWebアプリケーションの大まかな構成を理解していること
バックエンドの開発経験(業務経験は必須ではありません)
(3)インフラ、SREの知識、スキル
ソフトウェア信頼性を高めるための活動への理解、経験
AWS/GCPの業務経験、あるいはそれに類する経験
(4)ビジネス/エンジニアとのコミュニケーション力
相手の課題・ニーズをヒアリング、解釈でき、要件に落とし込める
複雑な要件を整理、適切なステークホルダーを巻き込んで合意形成できる
歓迎 高トラフィックサービスのストリームデータ処理経験
大規模データのバッチ処理経験
Data Intensive Applicationのデータストアやデータパイプラインの設計、技術選定の経験
統計学、機械学習の知識、スキル - 雇用形態は
- 正社員
- どこで働くか
- 東京都港区
- 勤務時間は
- <標準的な労働時間>
10:30~19:00 (所定労働時間8時間)
休憩時間:60分
<フレックスタイム制>
コアタイム:10:30~17:00 - 給与はどのくらい貰えるか
- 600万円 ~ 1249万円
- 待遇・福利厚生は
-
・交通費全支給
・各種社会保険完備(関東ITソフトウェア健康保険組合)
・昇給機会年4回
・賞与2回
・社内表彰制度
・社員海外旅行
<休日・休暇制度>
・完全週休2日制/土日祝休み
・夏期、冬期休暇実績
・有給休暇
・特別休暇(誕生日休暇、アニバーサリー休暇など)
・産前産後/育児休暇、生理休暇
掲載期間21/06/01~21/06/14
求人No.BRIE-mukaiDataenginn