転職AI
AIに相談
AIに相談
LINEヤフー株式会社

データエンジニア / 事業横断

データエンジニア ハイブリッド 正社員 シニア
想定年収
900万〜1500万円
勤務地
東京都 千代田区
リモート
リモート可
掲載中・最終確認 2026/5/27(1週間前)

仕事内容

LINEヤフー各事業に分散するデータを集約・横断利用可能にするデータセットおよびデータパイプラインの開発・運用を担うデータエンジニア。Hadoop/Trino/Hive/Spark等を用いたDWH・Feature Store向けのバッチ処理、Kafka等によるストリーミング処理、コンテンツ解析パイプラインを開発し、国内最大級のデータ基盤のスケーラビリティ・鮮度・再利用性の高度化を推進する。

求めるスキル・経験

必須
Hadoop、Trino、Hive、Sparkなどを用いた大規模データ処理の開発・運用経験
DWH(Hive、Redshiftなど)を用いたデータモデリングおよびデータ開発・運用経験
歓迎
KafkaやPulsarなどを用いたストリーミングデータ処理の設計・開発経験
大規模データベースや分散システムにおけるデータ処理・運用経験
機械学習や特徴量データに関する知見、またはFeature Storeの設計・運用経験
大規模データ環境におけるパフォーマンスチューニングやボトルネック改善の経験

関連スキル