【20代~40代のエンジニア活躍中！】■概要 データ基盤整備をお任せします。 ■具体的な作業内容 1. AWSのデータレイク(S3+Glue data catalog)からBigqueryへのデータ移行作業 2. Google Cloud Platformデータ基盤の整備(ワークフローエンジン導入等) (2については本人の意向、能力等を鑑みて判断とさせてください) ■募集背景：リソース逼迫のため、人員増員 ■業務環境：メンバー：3名(TL1名、エンジニア2名)　※部全体：50名弱 ■開発環境 ・言語 Python, Hive, Spark ・AWS EMR, Glue, Athena, Lambda, API Gateway ・Google Cloud Platform BigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows ・CI,CD,その他 Terraform, CircleCI, GitHub Actions, Digdag, Embulk ■担当工数 1.開発/保守改修 2.基盤設計/基本設計/詳細設計/開発 -------------------------------------------------------------------------------------- Midworkは正社員並みの保障を徹底追求。 充実の福利厚生で安定したフリーランスに。 --------------------------------------------------------------------------------------

・AWS上で動作するアプリケーションの開発/保守経験：2～3年 ┗AWSコンソール等を利用しシステムログ/アプリケーションログから課題発見、解決をした経験

※あったらなお良いが必須優先 ・EMR/Hive/Sparkを利用したアプリケーション経験 ・AWS or Google Cloud Platformによるデータ基盤開発経験

20代活躍中, 30代活躍中, 40代活躍中, 安定稼働, 通年募集

1回

弊社は複数のプロジェクトが進行中であり、お客様の経験と実績に基づいて、柔軟なプロジェクト提案を行うことが可能です。新しいアイディアや最新技術の導入に積極的であり、経験豊かなエンジニアがスキルを向上させるための環境を整備しています。 積極募集中の案件ですので、ご応募をお待ちしております。