ETL案件数
ETL案件・求人の月額単価相場
平均単価
99.0
万円
最高単価
132.0
万円
最低単価
71.5
万円
ETLの開発(データ関係)、JavaでのDataSpiderやEBXの開発を担当して頂きます。
EBXのアドオン、カスタマイズにJavaを使用するため、Javaが必須となります。
システムは、汎用機系のシステム含むデータを集めたものを統合する基幹システムです。
全員がすべてのツールを使えるように、得意なものを教えあっていこうという方針の現場です。
【工程】
基本設計から下流まで。
要件定義から対応できると尚可。
【環境】
DataSpider、Tibco EBX、A-AUTO、Deciplined Agile
【人数】
10名程
・ETLの開発経験(データ関係)
・Java設計経験
・DataSpiderやEBXの開発経験
大手WEBシステムのデータ基盤インフラエンジニアとしてご参画いただきます。
【業務内容】
・データ種の追加やアプリケーション追加によるデータ処理(Go言語・コンテナアプリケーション)の追加
・既存データ基盤(オンプレ、Kubernetes環境)の改修・検証・テスト
・各種ミドルウェア(CI/CD、監視、DB)の導入・検証・テスト
・データ基盤の量産
・顧客との打ち合わせ (顧客のエンジニアおよび弊社メンバーと一緒に開発いただきます)
・LinuxによるWEBアプリの開発経験3年以上
・コンテナアプリケーションの開発経験1年以上
・Docker・Kubernetes等でのコンテナ運用経験1年以上
・システムアーキテクチャ設計経験1年以上
エネルギー業界の顧客向け業務システムでAWSを利用したETL開発を行っていただきます。
ペアプロ/モブプロを採用しており、他のエンジニアへの技術指導も開発と並行してお願いします。
具体的には面談の際にお話ししますが、キャンペーン等の申込情報や契約情報の一元管理ができておらず、随時開発を行っています。
業務担当者が画面から条件指定して、検索することでキャンペーンの対象者の情報を活用できるようにするなどの効率化を図るためのデータ基盤を構築作業になります。
・Gitを用いたチーム開発経験、コードレビューの経験
・Pythonを利用したETL, Webアプリケーションの開発経験
・Pytestを用いたテストコード作成の経験
・AWS(Lambda, ECS, Glue, StepFunctions, S3, RDS, Aurora 等)を利用したETL開発経験
・スクラムでの開発経験(スクラムで何が大事か、また、スクラムを用いたプロセス改善を理解している)
データ分析基盤(データクリーンルーム)の設計/開発対応を行っていただきます。
・現行案件をベースに、Data Engineeringチームの設立 (データベースやデータウェアハウスに関する案件対応)
・広義的なエンジニアチームの一員として、様々な案件への対応可能性(他既存案件、新規案件、アドホック対応、PoC対応等)
・必要に応じて、ヘルプや検証チームとしての活動
・SQL開発経験
・以下のいずれかのクラウドベースのデータウェアハウスの利用スキル
∟Snowflake、Amazon Redshift、BigQuery、Azure Synapse Analytics
・以下のいずれかのロール経験
∟データエンジニア、データアナリスト、データベースエンジニア、アナリティクスエンジニア
・様々な種類のデータ(構造化/非構造化)を扱った経験
・データインジェスト、データパイプライン、ETL、ELT、データモデルの概念の理解
・リレーショナルおよびディメンショナルデータ構造、理論、実践に関する知識
【案件概要】
・データ基盤の開発/改修/保守運用
・データ基盤の物理/論理データモデル設計/開発/保守運用
・データ基盤のシステムアーキテクチャの設計
・データパイプライン (ETL) の設計/開発/保守運用
・GCP や AWS などの主なパブリッククラウドサービスにおける開発経験。
・DWHの設計・開発・運用経験
・ETLの設計・開発・運用経験
・SQLの経験
大手自動車メーカーにて、横断的なDWH環境の構築を実施する。
使用ツールはクライアント標準のETLツール(Talend)を使用し、クライアントの既存メンバーの方と協力しながら標準に則った実装を行っていただく。
・SQL実務経験
・DWHに関する知見
・ETLに関する知見