仕事内容
Treasure AIのPlazmaチームで、Hadoop/HiveおよびTrinoクエリエンジンと自社開発ストレージソリューションの将来を開発するシニアソフトウェアエンジニアを募集します。分散システム、Java、クラウド技術の深い知識を活かし、ペタバイト規模のデータ基盤の設計、開発、運用に貢献します。OSSへの貢献やチームメンバーの指導も重要な役割です。
Responsibilities & Duties:
- Hadoop/HiveおよびTrinoソリューションを設計・開発し、最新のデータアーキテクチャ評価とユースケース開発のための技術的専門知識を提供します。
- 高度なデータアクセスフレームワークと分散システムの設計、開発、チューニング、デプロイ、保守に関するエンジニアリング標準を確立します。
- 運用ニーズと顧客要望に基づいた製品ロードマップを定義し、新しいチームメンバーの指導とトレーニングを行います。
- ベースライン評価、パッチのバックポート、顧客向け機能のデプロイを含むバージョンおよびリリース管理を担当します。
- サポートチームおよび製品チームとリリースサイクルおよび機能提供について連携します。
- バグ修正、新機能、技術文書を通じてHadoop/HiveおよびTrino OSSに貢献します。
- SREと協力してクラスター運用を自動化し、自動化されたライフサイクル管理と負荷分散ワークフローを通じて運用オーバーヘッドを削減します。
- ヘルス指標、キャパシティプランニングツール、自動障害検出および回復システムを含むオブザーバビリティソリューションを設計・実装します。
- オンコール対応、エスカレーション処理、パフォーマンスおよび欠陥問題の詳細なトラブルシューティングを含む専門的な顧客サポートを提供します。
- ユーザー定義関数（UDF）やHadoop/HiveおよびTrino用の特殊なツールを含むカスタム技術ソリューションを開発します。
Your Role:
- Treasure AIのPlazmaチームはCDPソリューションの重要な要素であり、Core Servicesグループの一部です。
- Core Servicesグループは、1日あたり700億レコードの顧客データ取り込みと可用性をサポートしています。
- Hadoop/HiveおよびTrinoクエリエンジンの将来を開発し、自社開発のストレージソリューションへと拡張することが期待されます。
- 業界全体で解決策が不足している課題に対処するための技術的卓越性を維持し、チームと共にロードマップを実現します。
- チームは日本、韓国、カナダのビッグデータ専門家で構成されており、OSS貢献に情熱を注いでいます。
Our Dedication to You:
- ビジネスのあらゆる側面およびあらゆるレベルで多様性、公平性、包摂性、帰属意識を尊重し、推進しています。
- 成功は多様な視点を認識し、歓迎し、取り入れることから生まれると考えています。
- 成長、役割のオーナーシップ、新しい独自の方法でのイノベーション達成を奨励する包括的な文化を創造するよう努めています。
- あなたの声は聞かれ、それを増幅する手助けをします。
求めるスキル・経験
必須
5年以上の分散システム構築・運用経験
Javaに関する深い知識と、アルゴリズム、データ構造、分散システムの基礎に関する深い理解 Java
AWS, GCP, Microsoft Azureなどのパブリッククラウドにおけるクラウドアーキテクチャとサービスに関する確かな理解 AWSMicrosoft AzureGCP
マルチテナント環境向けに新規および改善されたデータソリューションを実装する強力な能力
ユースケース、機能仕様、設計仕様などの開発経験
HDFS, S3, Cassandra, Big Tableなどの分散型スケーラブルなビッグデータストアまたはNoSQLの利用経験 Cloud BigtableCassandraAmazon S3
強力な分析力とコミュニケーションスキル
歓迎
Hadoop/HiveまたはTrinoの機能に関する理解
ペタバイト規模のプロダクションクエリエンジンを運用した実績のある経験
マイクロサービスアーキテクチャ、データ統合パターン、OSSの拡張に関する知識
Infra-as-Code、SREプラクティス、高度なオブザーバビリティに関する知識
UDF開発とデータ可視化エコシステムに関する知識
セキュリティとプライバシーバイデザインの専門知識
大規模並列処理のためのストレージパターンと最適化に関する経験
募集要項
- 職種
- データエンジニア
- 雇用形態
- 正社員
- 想定年収
- 応相談
- 勤務地
- 東京都 東京
- 出社・リモート
- ハイブリッド / 週2日リモート
- 必要経験
- 5年以上
- レベル
- リーダー