転職AIログインマイページ求人へ
データエンジニア条件を変える閉じる
条件をクリア

Software Engineer(Data Platform)

ストックマーク株式会社

テック 東京都港区 企業サイト 掲載 7/3

給与

54.2〜91.7万円/月※ 月給提示。年額は賞与を含まないため算出していません

勤務地
東京都港区
雇用形態
正社員
働き方
国内フルリモート可

リモート可

年間休日
123日

完全週休2日

仕事内容データエンジニア

ストックマーク株式会社で、全プロダクト共通のデータ配信システムとなるWebクローラーおよび文書配信パイプラインの設計・開発・運用を担当するポジションです。TypeScript/Pythonを用いたデータプラットフォームの開発と、サーバーレス環境での分散処理のスケーラビリティ向上・監視設計を行います。データプラットフォームチームをリードし、生産性の最大化も期待されています。

会社概要

  1. ストックマーク株式会社は「価値創造の仕組みを再発明し、人類を前進させる」をミッションに掲げ、最先端の生成AI LLM技術を活用し企業の変革を支援している。
  2. フルスクラッチで国産LLMを開発できる技術力が強みで、2024年5月に国内最大級の1,000億パラメータの日本語特化LLM「Stockmark-2」を公開した。
  3. SaaS事業として製造業向けAIエージェント「Aconnect」、PaaS新規事業として業務AI実装支援プラットフォーム「SAT」を運営している。
  4. 日経225の30%、300社を超える企業での導入実績があり、2024年10月にシリーズDで45億円、累計88億円の資金調達を完了した。

現状の課題

  1. 数億件規模のWeb上の文献をクローリング/コンテンツ抽出/配信するデータパイプラインを開発・運用する人材が不足している。
  2. 自社プロダクトのAI Agent開発のためのデータ拡充の方針検討、要件定義、実装をプロダクトチームと連携しつつ実行する人材が不足している。

業務内容

  1. 全プロダクト共通の基盤となるデータ配信システムとして、Webクローラーおよび文書配信パイプラインの設計・開発・運用を担う。
  2. TypeScript/Pythonを用いたWebニュース・特許・論文などを配信するデータプラットフォームの開発と運用を行う。
  3. サーバーレス環境による分散処理のスケーラビリティ向上と監視設計を行う。
  4. データプラットフォームチームをリードし生産性の最大化を行うことも期待されている。

チーム構成

  1. 事業責任者(CEO)1名、開発責任者1名、プロダクトエンジニア7名、AI Agentエンジニア6名、構造化エンジニア3名、データエンジニア3名、プロダクトマネージャー1名、リサーチャー1名、CS 2名、Biz 8名で構成されている。

開発環境

  1. 開発言語はデータパイプラインがPython、WebクローラーがTypeScript(Node.js)。
  2. コンテナはDocker、IaCはTerraform、クラウドはAWSを使用。
  3. ライブラリはPyspark、Puppeteer、AIツールはCursor、CodeRabbit、Devinを使用。

ポジションの魅力

  1. 数億件規模の文書データを対象としたサーバーレス環境での大規模分散処理の設計・開発・運用経験を積める。
  2. 数万サイトを対象としたWebクローラーの開発を通じて、Webフロントエンド・バックエンド双方の知見を活かし、監視・運用設計のノウハウを習得できる。
  3. PdMやCustomer Successチームと連携し、プロダクト要件や顧客課題を踏まえた新規開発・改善提案を主体的に行い、技術視点から事業にコミットできる。
完全週休2日年間休日120日以上フレックス転勤なしリモート可

募集要項最終確認 8/5

雇用形態
正社員
想定年収
54.2〜91.7万円/月
勤務地
東京都港区
働き方
国内フルリモート可
年間休日
123日
職種
データエンジニア
経験年数
3年以上
掲載日
7/3
最終確認
8/5

応募資格(必須)

  • エンジニア歴3年以上
  • Python を用いたアプリケーション開発経験
  • 要件定義から設計〜実装〜運用に至るまで一気通貫での経験
  • 以下の経験1つ以上 ・サーバーレスを用いたフルスタックな開発/運用及びそのリード経験(Lambda, ECS, Fargate, Step Functions など) ・データパイプライン・ETLの構築やワークフローエンジン、分散処理フレームワークを用いた開発/運用経験(Sparkなど)

歓迎する経験

  • コンピュータサイエンスに関連する技術分野の修士号または博士号
  • チーム開発をリードした経験
  • 顧客向け自社開発サービスの開発、運用経験
  • 文書検索や文書推薦を行うサービスの開発、運用経験
  • サーバーレスに対する幅広い知見と業務経験
  • Terraformを用いた開発/運用経験

待遇・福利厚生

  • PC支給
  • インフルエンザ予防接種
  • 定期健康診断
  • 屋内全面禁煙
  • 成長加速費
  • 社員研修制度

この求人はストックマーク株式会社採用ページの掲載内容をもとに構成しています。応募条件の最新情報は募集元をご確認ください。

東京都のデータエンジニアの求人294件

東京都のデータエンジニアの求人をすべて見る(294件)

募集元の採用ページから応募できます

応募はストックマーク株式会社の採用ページで受け付けています。このページは採用ページの掲載内容をもとに構成しているため、最新の応募条件は募集元でご確認ください。

募集元の採用ページを開く
相談募集元で応募する採用ページへ

AI相談