- どんな仕事か
-
【ミッション】
全プロダクト共通のデータ配信システムに位置する、Webクローラーと文書配信パイプラインの設計、開発、運用を行なっていただきます。
【主な業務内容】
■TypeScript/Rust/Pythonを用いたWebニュース・特許・論文などを配信するデータプラットフォームの開発と運用
■大規模言語モデル(LLM)の学習に必要となる日本語データセットの作成
■顧客の社内文献を解析/配信するための解析ロジック及びデータパイプラインの新規構築と運用
■FaaS/CaaSによる分散処理のスケーラビリティ向上と監視設計
【開発環境】
■開発言語
Webクローラー: TypeScript(Node.js)
コンテンツ抽出/分類/集約, データパイプライン: Python
文字列処理: Rust
■コンテナ
Docker
■クラウド
AWS, GCP
【働き方】
■現在はほとんどの社員がフルリモートとなっております。
仙台・京都・大阪などから働いているフルリモートで働いている人、ワーケーションを楽しみながら働いている人、母国に数週間帰国して働いている外国籍社員など多様な働き方を実現しています。 - 求められるスキルは
-
必須 【必須スキル・経験】
■エンジニア経験3年以上
■PythonまたはTypeScript(Node.js)を用いたアプリケーション開発経験
■以下の項目を1つ以上満たす方
-サーバーレスを用いたフルスタックな開発/運用及びそのリード経験(Lambda, ECS, Fargate, Step Functions, Cloud Functions, Cloud Runなど)
-ワークフローエンジンや分散処理フレームワークを用いた開発/運用経験(Hadoop、Sparkなど)
【歓迎スキル・経験】
■コンピュータサイエンスに関連する技術分野の修士号または博士号
■顧客向け自社開発サービスの開発、運用経験
■文書検索や文書推薦を行うサービスの開発、運用経験
■サーバーレスに対する幅広い知見と業務経験
■リーダーなどの立場で事業背景を理解し自ら短期施策を立案/実行した経験
■Terraformを用いた開発/運用経験
【求める人物像】
■コンピュータサイエンス、分散処理が好き
■最新の理論や事例をフォロー、検証するのが好き
■与えられた課題だけでなく、自ら問いを立て、そのために必要な解決策を生み出せる
■ビジネスサイドとコミュニケーションしながら、いかにプロダクトに貢献できるかを考えられる
■前向きなチャレンジ精神 - 雇用形態は
- 正社員
- どこで働くか
- 東京都
- 給与はどのくらい貰えるか
- 700~1250万円
掲載期間24/11/29~24/12/12
求人No.MYN-10305750