下記を行っていただきます。 ・AWSを利⽤したビッグデータ解析⽤分散処理基盤のアーキテクチャ選定から設計 ・実装、運⽤フロー⾃動化の提案/実装 ・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定 ・各所ニーズ(マーケター、サイエンティスト、機械学習エンジニアなど）に応じたデータセットの作成 ・機械学習エンジニアと協業し、機械学習モデルのAPI環境の実装や、git,CI/CDの仕組み作りと維持

・データ処理基盤の設計/構築、または運用経験1年以上 ・AWS もしくは GCPを利用したサービスの構築経験1年以上 ・SQL による簡単なデータ分析の経験

・データ基盤チームの立ち上げ/チームリードの経験 ・Apache Airflow等のワークフローオーケストレーションを利用した開発経験 ・AWS Glue, Amazon EMR 等によるETL処理の開発経験 ・Amazon Athena, Amazon Redshift, BigQuery 等のDWH 製品利用/運用経験 ・Apache Spark, Apache Flink 等の分散処理フレームワークを利用した開発経験

1回

データエンジニアとして、ビッグデータ解析/分散処理基盤開発の推進を担っていただきます。 データエンジニアとして、データ基盤開発推進の経験がある方にマッチします。 基本的には一部リモート作業を見込んでおります。