データプラットフォームエンジニア（大規模データ基盤の設計・開発リード）

【事業について】 生成AIと自然言語処理を活かした法人向けサービスを開発しています。ニュース、特許、論文などの文献データを大規模に収集し、構造化して届けることで、企業が自社の外側で起きている変化をつかめるようにしています。国内の企業が使える生成AIの基盤を整えることを事業の柱に据えています。 【募集の背景】 利用する企業と現場の層が広がり、プロダクトごとに閉じたデータ処理では追いつかなくなりました。全プロダクト共通のデータプラットフォームを整える必要があり、その設計・開発を担うエンジニアを募集します。 【仕事の内容】 ・TypeScriptとPythonによるデータプラットフォームの開発と運用 ・Webニュース・特許・論文などを配信するデータパイプラインの設計開発 ・数万サイトを対象とするWebクローラーの設計開発 ・サーバーレス環境での分散処理のスケーラビリティ向上、監視設計 ・AI Agent開発に必要なデータ拡充を、PMやエンジニアと連携して推進 【このポジションの魅力】 ・数億件規模の文書データを扱う大規模分散処理を経験できます。 ・数万サイトを対象としたWebクローラーの設計に関われます。 ・生成AIプロダクトの根幹となるデータ基盤を、設計から手がけられます。

月給制で、45時間相当の固定残業代を含みます。超過分は別途支給します。昇給年2回（5月・11月）。基本フルリモート勤務が可能で、居住地は日本国内に限ります。屋内禁煙。