データプラットフォームエンジニア / Data Platform

600万円〜1,800万円

東京都

業務詳細
LINEヤフーでは、日々大量のデータが発生し、大量のデータがData Platformに蓄積されています。トータルでは数百PB以上のデータを蓄積・処理し、データ利活用に役立てています。この膨大なデータを安定して収集・蓄積・処理するために、専用のデータセンターを活用し、数千台のサーバーを用いて分散システム基盤を構築・運用しています。

私たちのData Platformは、代表的なものとして以下のような技術スタックを活用しています：

分散処理フレームワーク: Hadoop
分散メッセージングシステム: Kafka
分散ストリーム処理システム: Flink
分散SQLエンジン: Trino
分散データストア: Druid
これらの技術を駆使して、ビッグデータを安全かつ効率的に活用するためのインフラを提供しています。

また、データサイエンティストが簡単にAI活用できることを目指して、機械学習プラットフォーム（AIプラットフォーム）も独自で構築し提供しています。

主な業務内容
データ収集と統合: 異なるデータソースからのデータを効率的に収集し、統合するためのETLパイプラインの設計・実装。
リアルタイムデータ処理: KafkaやFlinkを用いたリアルタイムデータ処理の最適化と運用。
スケーラビリティとパフォーマンス: ネットワークの設計やハードウェアの選定など専門チームと協業しながらスケーラブルなインフラの設計・実装、パフォーマンスの最適化。
データ品質とガバナンス: データの一貫性、正確性、完全性を確保するためのツールやプロセスの導入。
データセキュリティとプライバシー: データの暗号化、アクセス制御、コンプライアンス対応。
AI/MLの統合と運用: 機械学習プラットフォームの構築・運用、MLOpsの導入。

LINEヤフー株式会社

東京都千代田区紀尾井町1-3東京ガーデンテラス紀尾井町 紀尾井タワー

正社員

健康保険 雇用保険 厚生年金 労災保険

休日：完全週休2日制（土日 ※1）、国民の祝日、年末年始（12月29日から1月4日まで） 休暇：有給休暇、特別有給休暇（慶弔、マタニティ、子の看護、介護、法定伝染病など）、ハッピーフライデー ※2、サバティカル休暇制度 ※1 部署により異なります。 ※2 祝日が土曜日にあたった場合、前労働日を振り替え特別休日としています。

2026/02/26