Sparkの案件・求人情報 | フリーランスエンジニアの案件・求人なら【テクフリ】

Sparkの案件一覧

検索結果数 13
単価:〜880,000円/月
半蔵門駅
業務委託(フリーランス)
業務内容

データ集積システムの開発・運用に関連するエンジニアリング業務
チームの役割: 各種システムに分散しているデータを収集・整形し、分析可能な形で社内のユーザー(社員)に届ける。
【主な担当業務】
データ集積システムの構築に関わる連携バッチの開発やデータマートの作成業務が中心です。
各部署の利用者から上がってくる要望や作業依頼を実現するための要件ヒアリングや開発、運用作業を行います。
また利用者からの要望に先んじてシステム改善を行うための開発も行います。

基本スキル

・要件定義、要件ヒアリングの経験
・Pythonでの開発経験
・SQLの理解・使用経験
・データ基盤の構築経験
・データモデル設計経験
・クラウド環境(GCP,AWS)での開発経験
・Webセキュリティ知識

単価:〜880,000円/月
渋谷駅
業務委託(フリーランス)
業務内容

仕事内容データアーキテクチャ、クラウド、分散プラットフォームなどデータエンジニアリングの技術を駆使して、利用者の用途や活用目的に応じたDWH・CDP環境を構築します。
【業務内容】
- 新規アプリの開発
- リリース後アプリ内での既存機能の改善・保守
- リリース後アプリ内での新規機能の設計・開発・テスト・リリースの実施
- クラウドを利用したDWH・CDPの構築
- ETLの実施・Workflowの作成
- BIツールを利用したダッシュボード構築
-API経由でのデータ接続
-BIツールによるダッシュボード構築
【案件詳細】
・小売店舗内のサイネージ(STB/タブレット端末など)にコンテンツや広告の配信を行うシステムの開発
・小売店舗内のIoT・エッジソリューションのシステム開発
・サイネージの端末管理と遠隔メンテナンスを行うシステムの開発

基本スキル

・データベース(RDB、NoSQL)の設計、運用
・Hadoop、Sparkなど分散処理フレームワークの知識
・EmbulkとDigdag等workflowに対する知識

単価:〜3,200円/時
東京駅
派遣
業務内容

・大手企業におけるWeb、メール施策のベースとなるレコメンドエンジンの改善、新規開発、データ分析等を担当して頂く予定にしております。
・ただし本人のスキルセットと希望を考慮し、業務内容(分析系 or 開発系)は適宜調整させていただきます。
※開発系:データ加工、バッチ開発、WebAPI開発、新規技術検証
※分析系:基礎分析、機械学習モデル構築、チューニング、レポーティング

基本スキル

※開発系 or 分析系で、以下いずれか必須
<開発系>
・ Python、Shell、SQLの業務使用経験
・ バージョン管理ツール(Git/SVN)業務使用経験
・ Linux環境における開発経験(LPICレベル1程度以上の知識)
・ 開発ドキュメント作成経験(詳細設計書、テスト仕様書等)
<分析系>
・ Python、Shell、SQLの業務使用経験
・ データ加工、モデル構築、検証、レポーティングまでの一連の分析サイクル業務経験
・ 機械学習の基礎知識
・ 統計学の基礎知識
【非スキル要件】
・ 常駐可能である
・ 自己の進捗を管理・共有できる(Backlog, Redmine等を使用)

単価:〜770,000円/月
半蔵門駅
業務委託(フリーランス)
業務内容

某住宅・不動産ポータルサイトを運営している企業で、データ集積システムの構築・運用に関連する業務をお任せいたします。
チームのミッションは各種システムに分散しているデータを収集・整形し、分析可能な形で社内のユーザーに届けることです。
主な担当業務は、 データマートの作成(利用者の要件を元に分析用データテーブルを作成する)とその周辺業務となります。
・データマートの設計・作成
・データ利用者への要件ヒアリング
・データ収集バッチの運用開発
・BIツールの設定
・既存システム・データの調査

基本スキル

・SQLの理解
・要件定義、要件ヒアリングの経験
・Python
・データモデル設計
・クラウド環境(GCP,AWS)での開発経験
・Webセキュリティ知識

単価:〜3,000円/時
渋谷駅
派遣
開発環境
業務内容

WebAPI及び周辺システムの開発・運用をして頂きます。

基本スキル

・Spring Frameworrk構成のWebアプリケーション及びバッチ処理について開発から保守運用までが出来る方
・サーブレット/サーブレットコンテナに関する基礎知識
・バージョン管理やパッケージ管理の基礎知識
・ShellScript等を用いて基本的なオペレーションが行える方

単価:〜3,600円/時
渋谷駅
派遣
業務内容

サーバーサイド側のDSP (Demand-Side Platform) の開発をお願いします。
1つのリクエストに対して100ミリ秒で応答を返すという制限と秒間1万を超えるリクエストを処理するシステムを作りま す。
チームはアジャイル開発をベースにカンバンなどで作業進捗を確認しながら、必要な分のドキュメントのみを作成してシステム開発をしています。
この仕事のポジションの魅力としては、100ミリ秒と言う低レイテンシと秒間1万リクエストを超える高スループットを求められるシステムの設計と実装にチャレンジできます。
また、それらのリクエストのデータを分析する必要がある為、1日に10億件を超えるログデータを集計してレポートとして作成したり、 分析をすることで次の配信の効率化を目指します。
それらの分析には機械学習を利用することもあり、リクエストを受けて低レイテンシで返す部分、ビッグデータを処理する部分、機械学習の部分、 それぞれの部分でそれぞれのエンジニアスキルを活かしたりチャレンジしたりすることが出来るプロダクトの開発になります。

基本スキル

・Linux,RDBMS,Java,Scalaを利用したWebアプリケーションの開発経験
・チーム内でコミュニケーションを行いながら、能動的に開発を進めてゆけるスキル
・ビジネスの要件からアーキテクチャの提案、システムの設計、実装、テスト駆動開発などを行える人
以下のスキルから少なくとも2つ(※業務経験でなくとも、OSS活動などの個人での活動でも構いません)
・Scala の利用経験
・Webフレームワークやライブラリ等の作成経験もしくはカスタマイズ経験
・アーキテクチャ設計もしくは技術選定経験
・Webサーバ、Web アプリケーションコンテナなどの M/W 導入やチューニング経験
・Hadoopエコシステム(MapReduce, Spark, Hive, Pig, Presto, Impalaなど)などを用いた大規模データ処理経験
・Cassandra,Redis,memcachedなどのKVS設計、運用経験
・Redshiftなどの列指向DBの設計、運用経験
・経験した事のない技術へ自ら挑戦や深耕してゆく意欲

単価:〜3,400円/時
京橋駅
派遣
開発環境
Spark
業務内容

リモートでの就業が可能となります。
※ミーティング時に出社してもらいます。
学生向け学習アプリのデータ分析基盤構築・運用担当として下 記 ような業務に携わっていただきます。
①関係各所から依頼されるレポーティン グ・分析要件に応じたデータ分析基盤 開発・運用業務
②データと機械学習を活用したレコメン ドや動画内 情報検索機能など 新規機 能開発業務

基本スキル

・Treasure Data / BigQuery / Hadoop / Spark など分散データ処理基盤を用いた開発経験
・Presto / Implara / Hive など 分散 SQLエンジンを用いた大規模データ処理 設計・開発経験

単価:〜1,050,000円/月
東京駅
業務委託(フリーランス)
業務内容

・転職サービスにおけるレコメンドエンジンの改善、新規開発を担当して頂きます。(データ加工、バッチ開発、WebAPI開発、新規技術検証、分析基盤開発)
・施策内容、本人のスキルセット及び希望によっては、機械学習モデルのチューニングやデータ分析もアサイン予定です。

基本スキル

・ Python、Shell、SQL、Javaの業務使用経験
・バージョン管理ツール(Git/SVN)業務使用経験
・inux環境における開発経験(LPICレベル1程度以上の知識)
・開発ドキュメント作成経験(詳細設計書、テスト仕様書等)
・常駐可能である

単価:〜830,000円/月
東京駅
業務委託(フリーランス)
業務内容

・大手企業におけるWeb、メール施策のベースとなるレコメンドエンジンの改善、新規開発、データ分析等を担当して頂く予定にしております。
・ただし本人のスキルセットと希望を考慮し、業務内容(分析系 or 開発系)は適宜調整させていただきます。
※開発系:データ加工、バッチ開発、WebAPI開発、新規技術検証
※分析系:基礎分析、機械学習モデル構築、チューニング、レポーティング

基本スキル

※開発系 or 分析系で、以下いずれか必須
<開発系>
・ Python、Shell、SQLの業務使用経験
・ バージョン管理ツール(Git/SVN)業務使用経験
・ Linux環境における開発経験(LPICレベル1程度以上の知識)
・ 開発ドキュメント作成経験(詳細設計書、テスト仕様書等)
<分析系>
・ Python、Shell、SQLの業務使用経験
・ データ加工、モデル構築、検証、レポーティングまでの一連の分析サイクル業務経験
・ 機械学習の基礎知識
・ 統計学の基礎知識
【非スキル要件】
・ 常駐可能である
・ 自己の進捗を管理・共有できる(Backlog, Redmine等を使用)

単価:〜880,000円/月
渋谷駅
業務委託(フリーランス)
業務内容

主な業務は、ビッグデータ技術を駆使した、社内向け業務基盤システムの開発です。
<具体的な業務内容>
・社内における業務基盤システムの開発および運用(Webベース)
そのほか、業務効率化を目的としたシステム開発、お客さま向け(インターネットにおける広告関連)のシステム開発の実績も多数。
開発はチーム体制(プロパーとグループ会社)で行っていただきます。
【仕事の特色】
システムインフラは、全て自社で構築、管理している同社。
独自の仮想インフラを有しており、新技術の検討や検証のために活用されています。
システム開発だけでなく、ネットワークやサーバの構築、システム運用監視の経験ができる機会もあるのが特徴的。
社内向けシステムの開発は、利用者との距離が近いため、企画・開発、新技術に積極的にチャレンジしやすい環境です。
主にHadoopやImpala、Sparkなどのビックデータの技術、ElasticSearchなどを採用。
さらにインタラクティブなUIにするため、BootstrapやAngularJS、JQueryを取り入れています。
また、クラウドも積極的に活用していく方針です。
<社内>
社内では20代、30代の比較的若いメンバーが揃っています。
制作チームにおける女性の就業率も高く、男女ともに働きやすい職場環境です。

基本スキル

・JavaまたはPHPを使った開発経験
・違う職種や立場の人とスムーズに業務を進行できる方

単価:〜830,000円/月
六本木駅
業務委託(フリーランス)
業務内容

・インターネット広告配信システムにおけるログ収集/集計システムの開発/運用
・レポーティングツールの開発/運用
・大規模データ解析を効率よく行うためのデータ処理基盤、ツールの開発/運用
・Hive、Spark、 AWS Athena、Google Bigquery等 オープンソース、クラウド上問わずデータ処理基盤の調査、活用
・配信最適化ロジック設計/開発、及びデータ分析

基本スキル

・Linux上での開発/運用経験
・AWSを利用したシステム構築業務経験、またはシステムのログ収集/解析業務経験
・Hadoop等の分散データ処理基盤の利用/運用経験
・インターネット広告における配信システムのログ収集/解析業務を学びながら成長していきたい方
※過去に1年以上該当する実務の経験が必要です。
※リーダー経験よりも実務経験、スキルを重要視します。

単価:〜880,000円/月
渋谷駅
業務委託(フリーランス)
開発環境
業務内容

内製広告配信システムの配信データ分析業務をメインに携わって頂きます。
その他にも下記業務にも携わって頂きます。
・数値に基づいた意思決定をするためのデータ分析
・新規配信手法のプロトタイプ作成・提案
・データ可視化システムを用いたレポーティング・プレゼンテーション 等

基本スキル

・分析要件定義
・統計的要素
・R,Python,Sparkを用いたデータ分析
・DBに対する知識をSQLの利用
・わかりやすさを意識したレポーティングとプレゼンテーション

単価:〜990,000円/月
渋谷駅
業務委託(フリーランス)
業務内容

WebAPI及び周辺システムの開発・運用をして頂きます。

基本スキル

・Spring Frameworrk構成のWebアプリケーション及びバッチ処理について開発から保守運用までが出来る方
・サーブレット/サーブレットコンテナに関する基礎知識
・バージョン管理やパッケージ管理の基礎知識
・ShellScript等を用いて基本的なオペレーションが行える方

Spark案件・求人の月額単価相場

平均単価
88.6万円
最高単価
104.5万円
最低単価
77.0万円
banner

Spark案件のよくある質問

サイトで確認できる在宅・リモート可のSpark案件は0件です。※日時によって件数が変動する可能性があります。なお条件次第でリモート可能になる案件も存在するため、まずはお気軽にご相談くださいませ。
Sparkの平均単価は88.6万円です。※勤務地、商流、スキル・ご経験により変動します。案件の詳細はSparkの案件一覧より、ご確認くださいませ。
banner
×
上部へ戻る