リモートワークオンライン面談相談可

【Python】ビッグデータ基盤の構築改善

67 ~ 72万円/月額想定年収:804 ~ 864万円

140~180時間

20日(月末締め翌月20日支払い)

業務委託(フリーランス)

海外(その他),フルリモート(その他),リモートあり(その他)

職務内容

【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! 【内容】 ビッグデータ(数十TBオーダー)基盤の 構築・改善(データエンジニア)をご担当いただきます。 以下のいずれか、もしくは複数を対応いただきます。 •Webデータクローリングのためのパイプライン新設や改善 •データのクレンジングやエンリッチメント処理 •データの品質改善を目的とした品質モニタリング環境の構築 •スケーラブルかつコスト効果の高いデータ基盤への改善 •将来的なデータサイエンス活用を踏まえたデータ基盤やデータ品質整備設計 【開発環境】 •データ収集:Python(Scrapy),AWSFargateforAmazonECS, AmazonManagedWorkflowsforApacheAirflow •データストア:AmazonS3,AmazonAuroraPostgreSQL •データトランスフォーム:ApacheSpark(PySparkがメイン。一部ScalaSpark),Databricks •その他:GitHub,Slack,Notion,Asana,GoogleWorkspace 【場所】フルリモート 【精算】140−180h 【面談】2回 【勤務時間】フレックス・コアタイム(13:00〜18:00) テックビズなら記帳代行無料!充実のサポートで安心して参画していただけます!

勤務地

海外(その他),フルリモート(その他),リモートあり(その他)

必須スキル

・SQLもしくはPythonでのデータ処理経験(3年以上) ・パブリッククラウド利用経験(3年以上) ・データ基盤構築経験 ・ApacheSpark(PySpark含む)でのデータ処理経験 ・AWSAnalytics系サービスの利用経験 ・Databricks利用経験 ・データマネジメント経験 ・DataOpsの概念への共感

案件の特徴

20代が活躍中!30代が活躍中!

商談回数

2回

情報提供元: テックビズフリーランス

3時間前