データプラットフォームエンジニア / Data Platform
想定年収
800万〜1800万円
勤務地
東京都 千代田区
リモート
リモート可
掲載中・最終確認 2026/5/27（1週間前）
仕事内容
LINEヤフーのデータプラットフォーム（数百PB級・数千サーバー規模）の構築・運用を担当するエンジニア。Apache Hadoop/Kafka/Flink/Trino/Druidを中核に、ETLパイプライン設計、リアルタイムデータ処理、スケーラビリティ最適化、データ品質・セキュリティ対応、MLOpsまで幅広く担当する。
求めるスキル・経験
必須
分散システムを利用したデータ基盤の構築、運用の経験（1年以上）
Python・Java・Goいずれかのプログラミング業務経験（1年以上）
Kubernetes、Dockerを使ったミドルウェアやサービスの開発と運用の経験
歓迎
100台規模以上の分散システムにおけるソフトウェア エンジニアリングまたはシステム エンジニアリングの経験
Apache Hadoop、Apache Kafka、Apache Flink、Apache Druidなどを利用したアプリケーションの開発・運用の経験
Apache Hadoop、Apache Kafka、Apache Flink、Apache Druidなどエコシステムの運用保守設計、および運用改善経験
KubernetesのClusterやエコシステムの設計、構築、運用経験
Web Applicationの開発・運用の経験
CI/CDなどによるシステム自動化の経験
機械学習のシステム開発やプログラムの実装経験
Google Cloud Platform、Amazon Web ServicesでのAI開発経験
オープンソースへの貢献