【業務内容】 大手広告代理店が展開しているインターネット広告代理店業における、膨大な広告データを収集・蓄積したデータレイクからデータを展開するためのデータ基盤（ETL処理、DWH、DM）の開発、運用、保守をお願いします。【ポイント】データレイクが取り扱うデータ量は数十TB/月を誇り、毎日数10億単位のレコードを蓄積しているため、そんな大規模データと向き合った開発にチャレンジすることができます。複数のプロダクトを管理しているチームのため、様々な技術を習得することができます。【開発チームと配属先について】 当事業部には現状で約60名のエンジニアが在籍しており、複数のチームに分かれて開発を進めています。 今回お願いしたいポジションはサーバサイドエンジニアです。チームには現在18名のエンジニアが在籍しています。 また、複数のプロダクトを管理しているチームのため、担当領域ごとにグループ分けをしています。Infeed領域の広告運用のためのプロダクトを開発するグループインターネット広告関連データをデータレイクに蓄積するシステムを開発するグループインターネット広告関連データが蓄積されたデータレイクを用いたデータ基盤を開発するグループ機械学習を用いたプロダクトを開発するグループ掲載情報や実績情報を出力・レポーティングするための分析用プロダクトを開発するグループ【技術キーワード】ApacheSparkAWSGlueSnowflakeデータレイク/データウェアハウス/データマート

〜¥800,000 /月 分析基盤エンジニア リモート/在宅 東京都 IT・情報通信

–Scala,Java,Pythonなどを用いた開発経験3年以上 –ApacheSpark,PySparkなどを用いたETL処理の開発・保守経験1年以上 –SQLを用いた開発経験3年以上 –AWSを利用した開発経験 –Dockerなど、コンテナ技術を利用した開発経験 –GitHubでのPRを利用した開発経験

–外部APIを利用した開発経験 –大規模データを扱った開発経験 –Kubernetesなど、コンテナオーケストレーションサービスを利用した開発経験 –Snowflake,Redshift,BigQueryなどを用いたDWH・DMの運用経験 –インターネット広告についての基礎知識

1回