転職AI
保存・履歴

保存と履歴は、この端末のブラウザにだけ残ります。会員登録すると、スマホとPCで同じ一覧を見られ、条件に合う新着求人もメールで届きます。

ログインマイページ
求人へ
職種・勤務地・キーワードで探す
条件を変える

こだわり条件

こだわり条件
条件をクリア
東京都の機械学習エンジニアの求人198件

Software Engineer - LLM Pre-Training / 大規模言語モデル 事前学習エンジニア

株式会社Preferred Networks

この会社の求人 74件

掲載中・1日前に確認

給与
応相談募集要項に金額の記載がなく、経験・能力などに応じて決まります
勤務地
東京都千代田区
休日
休日：土曜日、日曜日、国民の祝日、国民の休日、年末年始
雇用形態
正社員

どんな仕事かAIによる生成

大規模言語モデル（LLM）の事前学習に必要な研究開発に取り組み、高性能な事前学習モデルを構築します。データセット戦略・モデルアーキテクチャ・学習手法の研究開発のほか、大規模・長期間の学習を効率よく安定して実行するための取り組みも行います。

応募資格・募集要項・仕事内容を見る

この求人に応募

給与応相談

募集元で応募する株式会社Preferred Networksの採用ページへ
相談する共有準備中

応募は募集元の採用ページで受け付けています。当サイトに応募フォームはありません。

応募資格

必須

  • コンピュータサイエンスの知識や関心
  • コンピューターサイエンスのすべての分野への精通を目指し、常に最先端の技術を追いかけ続けていること
  • 特に、機械学習または自然言語処理に関する研究または実務の経験および実績
  • Pythonを使ったソフトウェア開発経験
  • コンピューターアーキテクチャーを理解し、ソフトウェアの実効効率や、計算量を意識したプログラムの作成が出来ること
  • 数学、自然科学（物理、化学など）に関する、大学卒業程度の知識（もしくは学習により習得可能なこと）
  • チームでの課題解決の経験

歓迎

求める人物像

  • 事前学習LLMの開発に携わりたい方、熱意のある方

募集要項最終確認 11/12

職種
機械学習エンジニア
雇用形態
正社員（試用期間3ヶ月、本採用と同条件）
給与
応相談
給与の詳細
経験、業績、能力、貢献に応じて、当社規定により優遇 ※基本給及び固定残業代の金額及び内容については、オファー時に速やかに明示します
手当
通勤手当在宅勤務手当ラップトップPC購入補助
勤務地
東京都千代田区大手町１−６−１ 大手町ビル / Otemachi Bldg., 1-6-1 Otemachi, Chiyoda-ku, Tokyo, Japan 100-0004
働き方
ハイブリッド勤務（オフィス出社と在宅勤務を組み合わせての勤務）
勤務時間
専門労働型裁量労働制（みなし労働時間：8時間）もしくはフレックス制
休日・休暇
休日：土曜日、日曜日、国民の祝日、国民の休日、年末年始当社規定による年次有給休暇制度（入社時26日付与）育児休暇、慶弔休暇など
福利厚生
確定拠出年金制度定期健康診断実施
社会保険
社会保険完備（厚生年金保険、健康保険、雇用保険、労災保険）
掲載日
2026/07/01 09:44（135日前）
最終確認
2026/11/12 18:56（1日前）

仕事内容

Job Description

  • 事前学習チームの役割は、LLMの大規模な事前学習を行い、高性能な事前学習モデルを構築することです。事後学習を終えた後のモデルが実用的で価値の高いものとなるようにLLMに知識や能力を学習させる必要があります。 強化学習などの手法の発展により、LLMは事後学習によって様々な能力を発揮させることができるようになっている一方で、事前学習で全く学習できていない能力を事後学習で発揮させることは難しいという報告もあります。事後学習で高い性能を発揮させるためには、事前学習での取り組みも重要です。 大規模言語モデル - 事前学習エンジニアは、高性能なLLMの事前学習のために必要な研究開発に取り組みます。事前学習モデルの最終的な性能を決めるデータセット戦略・モデルアーキテクチャ・学習手法の研究開発以外にも、大規模・長期間の学習を効率よく安定して実行し続けるための取り組みなども行っています。

業務例

  • 事前学習において、大量の計算資源を効率良く用いるための最適化やソフトウェアの研究開発
  • 長期間の学習を安定して動作させるための研究開発や運用
  • 事前学習モデルの性能を正しく計測するための研究開発
  • 事前学習モデルの性能を向上させるためのデータセットに関する研究開発
  • 基盤モデルに獲得させたい知識や能力に応じた学習データの収集・構築の戦略検討および品質管理・運用
  • 基盤モデルの能力を測るためのベンチマークの調査、必要に応じて新規ベンチマークの構築
  • 事前学習モデルの性能を向上させるための学習手法 (DNNアーキテクチャやoptimizerなど)の研究開発
  • 実際の業務はこれに限定されるものではありません。入社後に実際にご担当いただく業務内容は、専門的知識・経験を考慮のうえ決定します。 事前学習LLMの開発に携わりたい方、熱意のある方のご応募をお待ちしています。

Job Description

  • The pre-training team’s role is to conduct large-scale pre-training of LLMs and develop high-performance pre-trained LLMs. The goal is to equip the LLM with the necessary knowledge and capabilities to ensure that models after post-training are practical and valuable. While advancements in techniques like reinforcement learning have enabled LLMs to demonstrate various capabilities through post-training, some reports suggest that achieving capabilities that were not learned during pre-training through post-training alone can be challenging. To achieve strong performance in post-training, pre-training efforts are equally crucial. As a LLM Pre-training Engineer, you will engage in research and development required for high-performance LLM pre-training. In addition to developing datasets strategy, model architectures, and training methodologies that ultimately determine the final performance of pre-trained models, you may also work on optimizing and ensuring efficient, stable execution of large-scale, long-term training.

Your responsibilities may include:

  • Research and development to improve efficient utilization of massive computational resources during pre-training
  • Research and development for stable execution of long-term training
  • Research and development for accurate performance measurement of pre-trained models
  • Research and development of datasets to improve the performance of pre-trained models
  • Developing strategies for collecting and constructing training data tailored to the specific knowledge and capabilities desired for the foundation model, along with quality control and operational management
  • Researching benchmark assessments to measure foundation model capabilities, and developing new benchmarks as needed
  • Research and development of training methodologies (including DNN architectures and optimizers) to enhance pre-trained model performance
  • This job description is not exhaustive, and the actual duties assigned to you may vary depending on your expertise and experience. We look forward to receiving applications from those who are passionate about contributing to the development of pre-trained LLMs.

この求人は、株式会社Preferred Networksの採用ページの内容をAIが読み取って整理したものです。応募の前に採用ページの原文を確かめてください。データの集め方企業サイト

同じ会社の求人74件

株式会社Preferred Networksの求人をすべて見る（74件）

職種と勤務地が似ている求人東京都の機械学習エンジニア 198件

東京都の機械学習エンジニアの求人をすべて見る（198件）

募集元の採用ページから応募できます

応募は株式会社Preferred Networksの採用ページで受け付けています。このページは採用ページの掲載内容をもとに構成しているため、最新の応募条件は募集元でご確認ください。

募集元の採用ページを開く

この求人と近い条件で探す数字はリンク先ページの掲載件数

応募資格の語から探す

この職種で探す

この勤務地で探す

働き方・年収で探す

この職種を募集する企業

募集元で応募する採用ページへ
AI相談