発生日
2026/06/03
業務内容
既存SPARKパイプラインの現状調査・仕様整理、DatabricksへのETLパイプライン移行・実装、シルバー/ゴールドレイヤーのデータ変換処理の開発・テスト、移行後の動作確認・品質担保
開発環境
Apache Spark, PySpark, Databricks
必須スキル
DWH／データパイプライン開発・運用経験、Pythonを用いたデータ処理の実務経験、SQLによるデータ加工・集計の実務経験、Apache Spark / PySpark、Databricks（BP2名中1名は必須とする想定）、複数名チームでのプロジェクト参画経験
尚可スキル
シルバーデータ／ゴールドデータ設計・開発経験、アジャイル／スクラム開発経験
参画時期
2026年7月〜2027年3月（Q単位での更新予定）
作業場所
フルリモート（PC受取は神谷町出社。その他、稀に出社可能性有）
出社頻度
フルリモ
単価（1人月）
70万
清算幅
140～180H（上下割）
就業時間
支払
30日
外国籍
備考
大手企業向けデータ基盤において、既存のSPARKパイプラインをDatabricksへ移行するプロジェクトです。既存のDWH（契約者のデータ）が各システムからデータを収集して、シルバーデータやゴールドデータとして作成している処理をDatabrickに移行するというプロジェクトです。移行対象となるパイプラインは約1,000本規模に及ぶため、複数名体制での対応が想定されます。SIerに対しては最大7名の提案依頼が来ているとのことです。弊社からは社員＋パートナー様の複数名体制で提案予定です。アジャイル開発スタイルのSES参画となり、Q単位での契約更新を予定しています。案件情報の他社への無断配信や各求人サイトへの掲載はお控えください。提案後2営業日以内に返信がない場合はお見送りと判断ください。契約形態：準委任（履行割合型）。商流制限：貴社1社先まで。
案件の詳細確認やエントリーには、無料の会員登録が必要です。
最短1分で無料登録 / ログイン