ビッグデータ解析/分散処理基盤開発をお任せします。 今後様々な連携を行っていく上でのデータ基盤開発を強化していく方針であり、その推進をお願いできればと考えております。 ▼具体的には ・AWSを利⽤したビッグデータ解析⽤分散処理基盤のアーキテクチャ選定から設計 ・実装、運⽤フロー⾃動化の提案、実装 ・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定 ・各所ニーズ(マーケター、サイエンティスト、機械学習エンジニアなど）に応じたデータセットの作成 ・機械学習エンジニアと協業し、機械学習モデルのAPI環境の実装や、git,CI/CDの仕組み作りと維持

・データ処理基盤の設計/構築、または運用経験（1年以上） ・AWS もしくは GCPを利用したサービスの構築経験（1年以上） ・SQL による簡単なデータ分析の経験

・データ基盤チームの立ち上げ、チームリードの経験 ・Apache Airflow (Amazon MWAA, Google Cloud Composer) などのワークフローオーケストレーションを利用した開発経験 ・AWS Glue, Amazon EMR などによる ETL 処理の開発経験 ・Amazon Athena, Amazon Redshift, BigQuery などの DWH 製品の利用・運用経験 ・Apache Spark, Apache Flink 等の分散処理フレームワークを利用した開発経験 ・Amazon Kinesis Data Streams, Apache Kafka などを用いたストリーム処理の開発経験 ・アジャイル (スクラムベース）での開発経験 (CSM, CSPO, CSD保有者歓迎)

■特徴： ・リモート可 ・20代活躍中/30代活躍中/40代活躍中 ・週5日稼働 ・外国籍：ネイティブレベル ・管理番号：No.3956

1.0