データインフラストラクチャーエンジニア

具体的な業務内容

1. 1ハイパフォーマンスなデータインフラおよびパイプラインの設計、構築、最適化に責任を持つ
2. 2未加工の非構造化データを信頼性が高く、スケーラブルでアクセスしやすいシステムに変換する
3. 3大規模データシステムをアーキテクトし、パフォーマンス、信頼性、スケーラビリティを確保する
4. 4ETLプロセスを改善し、データ移動の効率、品質、および可用性を保証する
5. 5データの整合性を確保するため、データ品質基準、自動検証、および監視を確立・維持する
6. 6新技術を特定し、スケーラブルなソリューションのためのイノベーションとツール選定を推進する
7. 7模範を示してリーダーシップを発揮し、ジュニアエンジニアを指導し、チームの技術力を向上させるベストプラクティスを共有する
8. 8データサイエンティスト、アナリスト、プロダクトチームと密に連携し、インフラニーズを定義し、データに基づく意思決定をサポートする

仕事のやりがい

1. 1Macromillのデータの未来を形作る重要なインフラプロジェクトをリードする
2. 2ストリーミングおよびバッチ環境で膨大なデータを処理し、生の非構造化データを価値あるビジネスインサイトへと変換する重要な役割を担う
3. 3高ボリュームデータを効率的かつ信頼性高く処理するシステムを構築・最適化する機会がある
4. 4最新技術を試し、データシステムの迅速な反復と革新を推進する
5. 5最先端のツール、クラウドプラットフォーム、ビッグデータフレームワークを使用して、スケーラブルで高パフォーマンスなインフラを構築する
6. 6急速に進化する環境で、リーダーシップ、メンタリング、プロフェッショナルとしての成長の機会がある
7. 7技術イベントでMacromillを代表し、個人のブランドと企業の技術コミュニティにおける評価を高める機会がある

応募資格（必須）

• 少なくとも1つの主要なクラウドプラットフォーム（GCP推奨、AWSまたはAzure）での実務経験を持ち、ストレージ（例：BigQuery、S3）、コンピューティングリソース（例：Kubernetes、Dataproc）、ネットワーキングなどのインフラコンポーネントに精通していること。
• 1つ以上のプログラミング言語（Python、Java、またはScala）に強い習熟度を持ち、複雑なデータ処理ソリューションの構築経験があること。
• 高度なSQLスキルを持ち、大量データ環境でのクエリ最適化およびデータウェアハウジング技術に精通していること。
• Apache Spark、Hadoop、Kafkaなどのビッグデータフレームワークおよびツールに精通し、バッチおよびリアルタイム処理ソリューションの実装経験があること。
• 本番環境で大量データに対応するETL/ELTプロセスおよびデータワークフローの設計・構築実績があること。
• データガバナンスの実践、データ品質管理、およびデータ整合性を確保するための自動検証・監視の設定に関する理解があること。

歓迎する経験

• 分散システムに関する深い知識を持ち、データシステムのスケーラビリティ、フォールトトレランス、および信頼性に精通しており、Spark、Flink、Kafka Streamsなどの技術での実務経験があること。
• Apache AirflowやGoogle Cloud Composerなどのワークフローオーケストレーションツールを使用し、複雑なデータパイプラインや自動化ワークフローの管理経験があること。
• コンテナ化およびオーケストレーション（例：Docker、Kubernetes）に熟練しており、クラウド環境でのCI/CD、オートメーション、デプロイのためのDevOpsプラクティスに精通していること。
• データ暗号化、役割ベースのアクセス制御、業界のコンプライアンス基準（例：GDPR）などのデータセキュリティに関するベストプラクティスに精通していること。
• Prometheus、Grafana、DataDogなどのデータモニタリング、ログ管理、およびアラートツールの使用経験があり、データインフラの信頼性とパフォーマンスを確保できること。
• 技術プロジェクトやイニシアチブをリードした経験があり、アーキテクチャの意思決定を行い、ジュニアエンジニアを指導し、チーム全体でベストプラクティスを推進する能力を持つこと。

待遇・福利厚生

• 団体長期障害所得補償保険
• 契約保養所

求めるスキル・経験