- フリーランスTOP
- Sparkのフリーランス案件一覧
Sparkのフリーランス案件一覧
- 案件数
- 32件
【AWS】AWSおよびBIによるデータ活用（構築・アプリ・フルスタック） | 東京都 単価 月額 ～73万円
- 単価
- ～ 月額 73万円
- エリア
- 東京都
- 業界
- SIer
- 業務内容
- 続きを読む
■内容：スクラムのメンバーとして、基盤構築/アプリ開発を実施頂きます。（設計、開発、テスト、リリース）■期間：7月～（8月～でもok）※基本長期となる予定■その他テレワーク：対応可顧客事務所（品川等）での対応：有※フルリモート希望の場合は別途ご相談ください稼働率は基本100％の想定
【六本木/リモート併用】AzureDatabricks開発支援 | 東京都 単価 月額 ～100万円
- 単価
- ～ 月額 100万円
- エリア
- 東京都
- 業界
- SIer
- 業務内容
- 続きを読む
■概要Azure Databricks 開発案件（CXプロジェクトの一環としてデータマネージメントシステム）。顧客の作成中のソースのレビュー、データ変換・移行に関する分析。１つLayerにあるデータを変換して次のLayerに持っていく。（Layer 1⇒Layer 2⇒Layer 3）Layer 3でMLなどに活用、BIで分析（別チームが動いている）
【リモート併用】製造業様向けAzure Databricks開発案件（CXプロジェクトの一環としてデータマネージメントシステム） | 東京都 単価 月額 ～110万円
- 単価
- ～ 月額 110万円
- エリア
- 東京都
- 業務内容
- 続きを読む
■概要 製造業様向けAzure Databricks開発案件（CXプロジェクトの一環としてデータマネージメントシステム） ■主な担当業務 Bronzeにあるデータを変換して次のSilver Layerに持っていく。（Bronze⇒Silver⇒Gold） GoldLayerのデータをMLなどに活用、BIで分析（別チームが動いている） - 要件分析とソリューションアーキテクチャ設計及び仕様の作成 - データモデリングとデータアーキテクチャ設計 - ETL、データ統合、およびデータ移行の設計 ■働き方 リモート併用
【Azure/DWH/ETL】障害調査、問合せ対応 | 東京都 単価 月額 ～60万円
- 単価
- ～ 月額 60万円
- エリア
- 東京都
- 業務内容
- 続きを読む
■概要 Azure Databricks DWHおよび周辺ETLの障害調査、問合せ対応。 日次・月次・年次・任意で連携されるIFファイル（csv, txtなど）を、Azure Data FactoryおよびDatabricks Notebook（Pyspark、SQL）にてDataフォーマット連携・加工処理を実施。 他のプログラムとして、旧DWHで実行されているPL/SQLを変換したストアドがSQL Databaseで実行される。 データの実態はData LakeにParquetファイルで保管されユーザーにUnityCatalogで提供される。
【Java/Python/生成AI】生成AI/LLM専任チーム | 東京都 単価 月額 ～85万円
- 単価
- ～ 月額 85万円
- エリア
- 東京都
- 業務内容
- 続きを読む
■概要・プロダクトへの生成AI/LLM技術適応の開発・生成AI・LLMに関わるサービスの技術選定、アプリケーションのアーキテクチャ設計・生成AI・LLMに関わる最先端の技術キャッチアップ・外部発信
【Java】サーバサイドエンジニア案件 | 東京都 単価 月額 ～90万円
- 単価
- ～ 月額 90万円
- エリア
- 東京都
- スキル
- JavaPHPRubyJavaScriptSQLSpringSpring BootCakePHPLaravelVue.jsSQL ServerMySQLPostgreSQLGitJenkinsCircleCILinuxTomcatSparkDocker
- 業務内容
- 続きを読む
日本No1.のコスメ・美容の総合サイトおよび関連サービス全ての基盤部分の開発・運用を担当をしていただきます。■業務内容：・ポイント関連・会員に関する情報管理・認証基盤・各種検索機能・弊社内だけではなくBtoBのサービスとして社外へも提供している様々なAPIの開発及び運用※能力に応じて、企画やデザインから検討会議に参加していただくことが可能です。■開発環境・言語：Java、PHP、(Ruby)・PHPフレームワーク：Laravel、CakePHP・JavaScriptフレームワーク：Vue.js・Javaフレームワーク：Spring boot・データベース：MySQL、Microsoft SQL Server、(PostgreSQL)・ソースコード管理：Git・プロジェクト管理：Redmine、JIRA・情報共有ツール：Slack、confluence・デプロイ環境：Capistrano、Jenkins、Bamboo、CircleCI・ミドルウェア：Elasticsearch、Memcached、Redis、Kafka、Docker、(Spark)
Python/バッチ開発・運用案件 | 大阪府 単価 月額 ～50万円
- 単価
- ～ 月額 50万円
- エリア
- 大阪府
- 業務内容
- 続きを読む
自社独自のデータ集積のプラットフォームを持つ運営する企業にて主に様々な種類のDBのバッチ開発・改修・運用業務をお願い致します。・Pythonを使ったバッチ開発/改修/運用・データインサート …etc.【環境】：言語：Pythonインフラ： Google Cloud Platformデータベース： PostgreSQLDWH：BigQueryワークフロー： Google Cloud Composer (Apache Airflow)その他ミドルウェア： Dataflow(Apache Beam), Dataproc(Apach Spark) , Cloud Runその他開発環境： GitLab, Slack, Growi
ビッグデータ関連におけるシステム開発エンジニア募集案件 | 東京都 単価 月額 ～70万円
- 単価
- ～ 月額 70万円
- エリア
- 東京都
- 業務内容
- 続きを読む
大規模データを処理するためのクラウドインフラ・アプリケーションソフトの構築から、オーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、ビッグデータ関連システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。インフラエンジニアやアプリケーションエンジニアといった垣根なく、ご活躍いただくお仕事になります
データ基盤整備案件 | 東京都 単価 月額 ～80万円
- 単価
- ～ 月額 80万円
- エリア
- 東京都
- 業務内容
- 続きを読む
1. AWSのデータレイク(S3+Glue data catalog)からBigqueryへのデータ移行作業2. GCPデータ基盤の整備(ワークフローエンジン導入等)[業務環境]メンバー：3名（TL1名、エンジニア2名）※部全体：50名弱[開発環境]・言語Python, Hive, Spark・AWSEMR, Glue, Athena, Lambda, APIGateway・GCPBigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows・CI,CD,その他Terraform, CircleCI, GithubActions, digdag, embulk[担当工数]1.開発/保守改修2.基盤設計/基本設計/詳細設計/開発
システム運用エンジニア案件 | 東京都 単価 月額 ～80万円
- 単価
- ～ 月額 80万円
- エリア
- 東京都
- 業務内容
- 続きを読む
1. AWSのデータレイク(S3+Glue data catalog)からBigqueryへのデータ移行作業2. GCPデータ基盤の整備(ワークフローエンジン導入等)[開発環境]・言語Python, Hive, Spark・AWSEMR, Glue, Athena, Lambda, APIGateway・GCPBigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows・CI,CD,その他Terraform, CircleCI, GithubActions, digdag, embulk[担当工数]1.開発/保守改修2.基盤設計/基本設計/詳細設計/開発
【SQL(AWS尚可)/基本リモート】製品利用ログ分析基盤の開発・運用 | 東京都 単価 月額 ～60万円
- 単価
- ～ 月額 60万円
- エリア
- 東京都
- 業界
- SIer
- 業務内容
- 続きを読む
クラウド(AWS)を使用した製品利用ログ分析基盤の開発・運用Redshift (PostgreSQL)上のDBテーブル設計、クエリ開発AWS EMRを使用したETL, データ前処理 (Python, Spark)■現状の主な作業 ユーザの操作ログやDB(Dynamo や DocumentDB)などのビッグデータをAWS の Redshift にロードし、そこから集計処理(Redshift to Redshift のテーブル 設計・集計実行)を行うバックエンド作業。 既存のSQL分を読み解いて、別の新規のSQLを作ったり、効率化を進めたりする。 集計処理後のテーブルデータは、Tableau などに渡して月次報告書などを出力 する。（Tableau 連携まではやったりやらなかったりなので、Tableau 知識・経験は事前には不要）■作業工程設計・実装・デバッグ・テスト■作業期間2024/7/1 ～ (1年以上継続を希望)■募集人数1 名■貸与PCテレワークに必要なPCは顧客より提供あり
（Python/Hadoop）ビックデータの基盤構築案件 | 東京都 単価 月額 ～90万円
- 単価
- ～ 月額 90万円
- エリア
- 東京都
- 業務内容
- 続きを読む
某大手事業会社内でのビックデータ案件になります。現在稼働しているHadoop環境の運用、保守に加え、新規機能の開発などがスタートしたため人員の増員を計画しております。データ分析は別チームが存在しますので、あくまで分析を行うための環境構築を行って頂くポジションとなりますが、現場の状況、また適正次第では分析業務にも関わっていただく可能性がございます。※具体的な業務内容※・Sparkを利用して、Hadoopクラスタ上のデータを分析するツールの開発・Hadoopクラスタにデータを取込（いわゆるETL）アプリ・スクリプトの保守・Hadoopクラスタの運用
【Python/Java/Scalaなど】ディープラーニングエンジニア案件 | 東京都 単価 月額 ～90万円
- 単価
- ～ 月額 90万円
- エリア
- 東京都
- 業務内容
- 続きを読む
R&D部門にて、各種サービスの基盤開発や速度改善、ターゲティングやビッグデータを利用した開発、それらを支えるインフラストラクチャ再構築とデータ構造の再構築などを主に担当しています。 技術開発グループ、技術戦略グループは、ともに、速度改善やサービス基盤開発を行いながら、ビッグデータを活用した分析処理や、ストリーミング処理など先進的な技術を用いながら試行錯誤を繰り返しながら機能開発をメインに行っており、 インフラストラクチャグループはスケールしやすく、耐障害性、可用性の向上のための施策、保守・運用を行なうグループです。■業務内容：技術研究とそれらを用いた開発を行う部署にて、様々なデータを扱い、新たなサービス開発と改善または機械学習とディープラーニングなどを活用した課題解決を行います。 ＜具体的な仕事内容＞ ■行動分析とデータ最適化、データ・ドリブンなサービス改善とサービス開発 ■レコメンデーションシステムの開発、コンテンツ配信システムの開発 （経験・適性に応じてアサイン業務を決定いたします）・言語：Python、Scala、Java ・データベース：Microsoft SQL Server、MySQL ・その他: Apache Hadoop、Apache Kafka、Apache Spark、Presto、Apache Mahout、AWS
【Python】新規/既存セキュリティサービス開発案件 | 東京都 単価 月額 ～70万円
- 単価
- ～ 月額 70万円
- エリア
- 東京都
- 業務内容
- 続きを読む
新規セキュリティサービスの開発や既存セキュリティサービスの保守開発。新しい技術を積極的に使ってシステム開発を実施。
Scala/ サーバーサイドエンジニア案件 | 東京都 単価 月額 ～90万円
- 単価
- ～ 月額 90万円
- エリア
- 東京都
- 業務内容
- 続きを読む
広告技術のDSP開発をお願いします。本事業部では、各社とのシステム連携により広告を表示しています。1つのリクエストに対して100ミリ秒で応答を返すという制限(低レイテンシ)と秒間1万を超えるリクエストを処理(ハイスループット)するシステムを作ります。メイン言語はScalaを利用し、インフラ環境はGoogleCloudPlatformを利用しています。エンジニア５人程度のチームでアジャイル開発のプロセスをベースにカンバンなどで作業進捗を確認しながらすすめ、ドキュメントはコミュニケーションと保守に必要な最低限の情報で作成し、システムの実装、開発、運用をしています。
【Linux】アプリケーション、ミドルウェアのパフォーマンス改善業務案件 | 東京都 単価 月額 ～75万円
- 単価
- ～ 月額 75万円
- エリア
- 東京都
- 業界
- ソーシャルゲーム
- 業務内容
- 続きを読む
・高速なレスポンスを実現するためのアプリケーション、ミドルウェアのパフォーマンス改善 ・プロダクト開発と連携したミドルウェア検証・導入 ・各種基盤の監視体制の整備・強化【開発環境】Google Cloud Platform 、BigQuery 、StackDriver 、Kubernetes 、Spinnaker 、Docker 、Go 、Linux:CentOS、Ubuntu 、MySQL 、Redis 、Aerospike 、Fluentd 、Apache Spark 、Hadoop(Dataproc) 、Digdag 、DataDog 、New Relic、Terraform 、Packer Ansible 、GitHub 、CircleCI
【Python】学術系成果物管理システム 保守開発案件 | 神奈川県 単価 月額 ～75万円
- 単価
- ～ 月額 75万円
- エリア
- 神奈川県
- 業務内容
- 続きを読む
学術系成果物管理システムの保守開発をお願いします■ 環境：【技術】Python【インフラ】CentOS7, Riak, Solr, Spark【開発環境】MacOS. Git.■ 案件詳細：以下システムの機能追加開発、および保守運用* 学術系論文や書籍等の成果物情報を収集、正規化、名寄せを実施するシステム* 正規化/名寄せデータを外部サービスへ提供するシステム（主としてWeb API）
【PHP/Hack/Java/Goなど】急成長中企業のアプリケーションエンジニア案件 | 東京都 単価 月額 ～90万円
- 単価
- ～ 月額 90万円
- エリア
- 東京都
- 業界
- ECサイト
- スキル
- JavaPHPRubyPerlScalaHackJavaScriptTypeScriptSQLSpringCakePHPSymfonyZend FrameworkLaravelVue.jsSQL ServerMySQLPostgreSQLGitJenkinsCircleCILinuxCentOSHadoopSpark
- 業務内容
- 続きを読む
ECや実店舗も持ち、幅広くBeautyに関するビジネスを展開している急成長中の企業にて各種サイトの開発に携わっていただきます。■業務内容事例：・クチコミサイトの開発・ブログサイトの開発・Q&Aサイトの開発・ポイントサイトの開発・ECサイトの開発・サロン予約サイトの開発・新規事業の開発・上記開発を支えるAPI開発など（経験・適性に応じて上記開発案件の配属チーム、アサイン業務を決定いたします）■開発環境：・言語：PHP、Hack、JavaScript(ES6、TypeScriptなど)、Java、Go、Scala・PHPフレームワーク：Laravel(5)、CakePHP(2、3)、Zend Framework、ZendExpressive・JavaScriptフレームワーク：React、Riot.js、Angular、Vue.js・Javaフレームワーク：Spring・Goフレームワーク：Goa、echo・データベース：Microsoft SQL Server、MySQL、PostgreSQL、Couchbase、Cassandra・ソースコード管理：Git・プロジェクト管理：Redmine、JIRA・情報共有ツール：Slack・デプロイ環境：Capistrano、Jenkins、Bamboo、CircleCI・その他：Elasticsearch、Memcached、Redis、Hadoop、HBase、Spark、Kafka、Presto
【Java】IoT基盤構築案件 | 東京都 単価 月額 ～70万円
- 単価
- ～ 月額 70万円
- エリア
- 東京都
- 業務内容
- 続きを読む
IoTビジネスを拡大するにあたり、弊社クライアントビジネスのヒアリングはフレクトプロパーが担当するので、 そのビジネス要件に基づきアプリ基盤業務を遂行できる方の募集をします。 想定される環境は、AWS、heroku上へのアプリ構築になります。 センサーデバイス（httpとは限らない）からデータを吸い上げ、加工、集約、そして、見せる。までが近々でのミッションとなります。直近フェーズにおいては、ビッグデータではあるものの集約機構をつくるだけなので、性能要件が求められるかたち。現時点の見通しとしては、hadoopやspark、インパラなどの処理基盤構築はしない可能性が高い。treasure dataのようなクラウドサービスを利用する可能性あり。ビッグデータとなれば次フェーズでは、データサイエンス的な要素も求められ始めるので、その要素も今後出てくるはず。
【PM/PMO】急成長中企業のエンジニアリングマネージャー案件 | 東京都 単価 月額 ～90万円
- 単価
- ～ 月額 90万円
- エリア
- 東京都
- 職種
- スクラムマスター
- スキル
- JavaPHPScalaHackJavaScriptTypeScriptSQLSpringCakePHPZend FrameworkLaravelVue.jsSQL ServerMySQLPostgreSQLGitJenkinsCircleCIHadoopSpark
- 業務内容
- 続きを読む
下記いずれかの部門のマネージャー業務をお願いいたします。①ソリューション開発部②メディア開発統括部③システムアーキテクチャ部■業務内容：・開発チームのチーム編成や、プロジェクトにおけるチーム管理・プレイヤーとしての開発業務・エンジニアの目標設定・評価・育成・プロジェクトマネジメント、技術面以外も含めた問題解決、組織的改善・他部署との調整、コミュニケーションづくり・人材採用・率先した継続的なアプリケーション改善※技術選定やアプリケーション設計などにも参加いただくこともございます。■開発環境：・言語：PHP、Hack、JavaScript(ES6、TypeScriptなど)、Java、Go、Scala・PHPフレームワーク：Laravel(5)、CakePHP(2、3)、Zend Framework、ZendExpressive・JavaScriptフレームワーク：React、Riot.js、Angular、Vue.js・Javaフレームワーク：Spring・Goフレームワーク：Goa、echo・データベース：Microsoft SQL Server、MySQL、PostgreSQL、Couchbase、Cassandra・ソースコード管理：Git・プロジェクト管理：Redmine、JIRA・情報共有ツール：Slack・デプロイ環境：Capistrano、Jenkins、Bamboo、CircleCI・その他：Elasticsearch、Memcached、Redis、Hadoop、HBase、Spark、Kafka、Presto
【PHP/Ruby/Java/Goなど】急成長中企業のアプリケーションエンジニア案件（BtoB向け） | 東京都 単価 月額 ～90万円
- 単価
- ～ 月額 90万円
- エリア
- 東京都
- スキル
- JavaPHPRubyJavaScriptSQLSpringCakePHPLaravelVue.jsSQL ServerMySQLPostgreSQLGitJenkinsCircleCIHadoopSparkDocker
- 業務内容
- 続きを読む
ECや実店舗も持ち、幅広くBeautyに関するビジネスを展開している急成長中の企業にて各種サイトの開発に携わっていただきます。経験・適性に応じて配属チーム、アサイン業務を決定いたします■ 業務内容事例・サービスの開発・保守・運用機能開発はエンジニアだけでなく、他部署のプランナーやデザイナーとMTGを行い進めていく場合があります。・他サービスへの機能提供API開発・オンプレ環境からクラウド環境への移行作業・サービスの仮想化・定例MTGの実施朝会、夕会、週次定例、コードレビュー会などを必要に応じ、適時実施しています。■開発環境：・言語：PHP、Go、Ruby、Java・PHPフレームワーク：Laravel、CakePHP・JavaScriptフレームワーク：React、Angular、Vue.js・Javaフレームワーク：Spring・データベース：MySQL、PostgreSQL、Microsoft SQL Server、・ソースコード管理：Git・プロジェクト管理：Redmine、JIRA・情報共有ツール：Slack、confluence・デプロイ環境：Capistrano、Jenkins、Bamboo、CircleCI・ミドルウェア：Elasticsearch、Memcached、Redis、Hadoop、HBase、Spark、Kafka、Presto、Docker
フリーランスに対して
不安をお持ちの方へ
不安をお持ちの方へ
自分のスキルで大丈夫か？安定した収入を得られるのか？
税金や保険の手続きができるか？
そんな不安を全てサポートします。
簡単
60秒
会員登録はこちら
- 1
- 2
会員様限定！
非公開案件もございます
非公開案件もございます
無料会員登録すると一般では募集されていない”非公開求人”の確認ができます。
無料
会員登録はこちら
フリーランス向け 福利厚生サービス AIM CARE
弊社ではフリーランスの個人事業主の方も安心して働いていただけるよう、さまざまなプログラムをご用意。
収入面でのサポートをはじめ、保険や生活面のサポートなど、
フリーランスとして生活するにあたっての充実したサポートをご提供しています。