【20代~40代のエンジニア活躍中！】■概要 データエンジニアとして、自社独自のデータ集積のプラットフォームを持つ運営する企業にて主に様々な種類のDBのバッチ開発・改修・運用業務をお願い致します。 ■具体的な作業内容 ・Pythonを使ったバッチ開発/改修/運用 ・データインサートetc. ■参画先企業について 世界中の特許・論文データや研究費・ベンチャー企業の資金調達情報などを扱っており投資データや特許データなど財務データと非財務データを組み合わせて事業戦略策定のコンサルティング提案などのサービスを行っております。 ■参画先チーム データ収集～データ処理を行っている部署です。 データの翻訳やデータ処理の高速化/自動化などを手掛けておりプログラミング言語はPython、Google Cloud Platform環境での業務で現場は5名のチーム体制です。 ■工程：開発～運用 ■環境 言語：Python インフラ： Google Cloud Platform データベース： PostgreSQL DWH：BigQuery ワークフロー： Google Cloud Composer (Apache Airflow) その他ミドルウェア： Dataflow(Apache Beam), Dataproc(Apach Spark) , Cloud Run その他開発環境： GitLab, Slack, GROWI -------------------------------------------------------------------------------------- Midworkは正社員並みの保障を徹底追求。 充実の福利厚生で安定したフリーランスに。 --------------------------------------------------------------------------------------

・Google Cloud Platform環境での開発経験/知見 ・Pythonを使用してのプログラミング経験

・データパイプラインやETLの設計の知識/関心/経験 ・HadoopやSparkなど分散処理基盤の知識/関心/経験

20代活躍中, 30代活躍中, 40代活躍中, 安定稼働, 通年募集

1回

弊社は複数のプロジェクトが進行中であり、お客様の経験と実績に基づいて、柔軟なプロジェクト提案を行うことが可能です。新しいアイディアや最新技術の導入に積極的であり、経験豊かなエンジニアがスキルを向上させるための環境を整備しています。 積極募集中の案件ですので、ご応募をお待ちしております。