【概要】①某大手小売・流通のシステム開発 ②広告や社内プロダクトの開発 上記いずれかにおいてデータエンジニア業務に従事いただきます。 案件カテゴリー： 開発 最寄駅：半蔵門※リモート可 打合せ回数：2回 ※週5日〜OKの案件です！

・Python ・MySQLによる大規模データの処理経験 ・AWSやGCP、Azureなどクラウドを利用した開発経験 ・下記の項目から 1つ以上の経験を有する方 リレーショナルDBを使ったデータ処理の開発経験、データ処理パイプラインの開発経験、分散データ処理の開発経験 (Apache Hadoop/Sparkなどを使用)、Webスクレイピング等の Webから情報を収集するシステムの開発経験

・コンピューターサイエンスの修士号、もしくはそれに相当する知識と業務経験 ・Apache Airflowなどを用いたデータ処理パイプラインの開発経験 ・Apache Sparkなどの分散処理フレームワークを用いたデータ処理の開発経験 ・Apache Pulsar, Kafkaなどのメッセージキューを用いた開発経験 ・Kubernetesなどのコンテナ技術を用いたシステムの開発経験 ・機械学習のモデルの作成と運用経験

2回