- どんな仕事か
-
全プロダクト共通のデータ配信システムに位置する、Webクローラーと文書配信パイプライン
の設計、開発、運用を行なっていただきます。
エンジニアとして記載の課題解決のための開発を進めながら、データプラットフォームチームをリードし生産性の最大化を行うことも期待しています。
＜具体的な業務内容＞
・TypeScript/Pythonを用いたWebニュース・特許・論文などを配信するデータプラットフォームの開発と運用
・大規模言語モデル(LLM)の学習に必要となる日本語データセットの作成
・顧客の社内文献を解析/配信するための解析ロジック及びデータパイプラインの新規構築と運用
・FaaS/CaaSによる分散処理のスケーラビリティ向上と監視設計 - 求められるスキルは
-
必須 ※(1)?(3)すべて必須
(1)PythonまたはTypeScript(Node.js)を用いたアプリケーション開発経験
(2)要件定義から設計?実装?運用に至るまで一気通貫での経験
(3)以下の経験1つ以上
・サーバーレスを用いたフルスタックな開発/運用及びそのリード経験（Lambda, ECS, Fargate, Step Functions, Cloud Functions, Cloud Runなど）
・データパイプライン・ETLの構築やワークフローエンジン、分散処理フレームワークを用いた開発/運用経験（Hadoop、Sparkなど）
・日常会話レベルの日本語スキル - 雇用形態は
- 正社員
- どこで働くか
- ＜本社＞東京都港区南青山1丁目12-3 LIFORK MINAMI AOYAMA S209 ※フルリモートワーク可
- 給与はどのくらい貰えるか
- 600万円～899万円
掲載期間26/09/20～26/11/14
求人No.LEVE-RCT0000088919
