<Apache Spark/Databricks>事業者向けデータ加工処理マイグレーション検討業務支援(10939)
データエンジニア
800,000 ~ 850,000 / 月額
業務委託/基本リモートワーク / 基本リモートワーク ※オンサイトMTGが発生した場合は出社(東京都江東区)
募集概要·背景
■事業者向けデータ加工処理マイグレーション検討業務
○現行加工処理をマイグレーションの計画/方式の検討立案を行っていただきます。
【マイグレーション例】
・現在オンプレミスのApache sparkで行われているデータ加工処理のクラウドシフト
・ETLツールやHadoopで行われている処理をSparkを使用した加工処理に置換する
⇒Databricks、snowflake(snowpark)、AWS(Glue,EMR)等のSpark関連マネージド・サービスにマイグレーション
求める人物像
■Apache Sparkを用いたデータ加工処理の経験者
■Databricks、Snowflake(Snowpark)、AWS(Glue、EMR)の知見がある方
■コミュニケーション良好な方
■勤怠良好な方
求めるスキル
AWS, Apache