Conema

1. AWSのデータレイク(S3+Glue data catalog)からBigqueryへのデータ移行作業 2. GCPデータ基盤の整備(ワークフローエンジン導入等) ※2については本人の意向、能力等を鑑みて判断とさせてください 【開発環境】 - 言語] Python, Hive, Spark - AWS EMR, Glue, Athena, Lambda, APIGateway - GCP BigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows - CI・CD・その他 Terraform, CircleCI, GithubActions, digdag, embulk 【勤務場所】 在宅 ※備考 アダルトコンテンツあり

AWS上で動作するアプリケーションの開発/保守経験：2～3年 - AWSコンソール等を利用しシステムログ/アプリケーションログから課題発見・解決をした経験 - AWS or GCPによるデータ基盤開発経験