プロジェクト概要
👥
チーム規模
5名（DE3名、DS1名、PM1名）
🔄
開発手法
カンバン
📋
フェーズ
開発〜運用
開発環境・言語
Scala 3Apache SparkKafkaAWS EMRS3AirflowJupyter
職務内容
通信キャリアの通信ログ（日次10TB）を分析するデータ処理基盤の開発です。Scala + Apache Sparkでバッチ/ストリーミング処理を実装。異常検知パイプライン、ネットワーク品質分析、解約予測モデルのデータ前処理を担当します。
募集背景
データ分析基盤の高度化に伴い、Scalaエンジニアを増員。
必須スキル
- Scala or Java経験3年以上
- Apache Spark経験
- 大規模データ処理経験
歓迎スキル
- 通信業界経験
- ストリーミング処理経験
- MLパイプライン経験