データ蓄積システム(Hadoop/Spark)を構築し商用トライアルを実施したところ、課題が見つかったため、商用化に向けた改善を行います。 1、HadoopYARN/HDFS/Sparkのチューニング、性能検証：1名 HadoopYARN：メモリ、CPU数、データノード多重度など HDFS：ブロックサイズ、DataNodeへの接続数、Nameノードヒープサイズなど Spark：テーブルキャッシュ、パーティション数、コア数、エグゼキュータ数など 2、OSSの調査・導入・検証：3名 ・HDFSデータの暗号化、圧縮技術の調査・検証 ・大量構造化データの保持方式の調査・検証 GreenplumDB、Hiveなど 環境はHadoop、Spark、PostgreSQL、Java、Linuxとなります。

川崎市

Hadoop、Spark、PostgreSQL、Java、Linuxなどのご経験

スキルアップ, 直案件

Hadoop、Spark、PostgreSQL、Java、Linuxなどの経験者を募集致します。弊社直案件です。技術未経験でも自発的にOSSの調査・導入・検証ができる基礎技術があればエントリー可能なスキルアップ案件となりますので、キャリアを積みたい方におすすめです。ご応募お待ちしております。