Apache Sparkのフリーランス求人・案件一覧(130件)
1 - 20/件 全130件
【BigQuery/Python/Google Cloud/ハイブリッド】不動産テック企業データ分析基盤構築:データエンジニアのフリーランス求人・案件
案件の内容
スタートアップ不動産テック企業にて、データ分析基盤構築とレコメンド機能開発をご担当いただきます。Google Cloudベースのデータパイプライン構築、DWH運用、レコメンド機能の開発・改善を主体的に推進いただきます。
求めるスキル
【Snowflake/Databricks/リモート併用】ITコンサル向けAIガバナンスソリューション企画支援:コンサル/企画のフリーランス求人・案件
案件の内容
データドリブンコンサルティング部門におけるAIガバナンスソリューションの企画・型化を支援いただく案件です。既存AIガバナンスルールの詳細化と、それをデータ基盤上に実装する際の具体的な方式検討が主要テーマです。担当者と並走しながら、ルールのブラッシュアップから実装方式の検討・運用設計まで一緒に推進いただきます。
求めるスキル
【Snowflake/Databricks/リモート併用】AIガバナンスソリューション企画支援:機械学習エンジニア/システムコンサルのフリーランス求人・案件
案件の内容
大手ITコンサルファームのデータドリブンコンサルティング部門におけるAIガバナンスソリューションの企画・型化を支援いただく案件です。既存AIガバナンスルールの詳細化と、それをデータ基盤上に実装する際の具体的な方式検討が主なテーマです。担当者と並走しながらルールのブラッシュアップから実装方式の検討・運用設計まで一緒に推進いただきます。
求めるスキル
【Power BI/Snowflake/リモート併用】リース業向けPower BI基盤構築PoC:データエンジニアのフリーランス求人・案件
案件の内容
総合リース業向けPower BIのPoC(概念実証)案件です。既存BIツールの更改に伴い、Power BIで現行機能の再現性を検証します。ダッシュボードや抽出条件を利用したデータダウンロードツールとしての利用を想定した基盤構築を担当いただきます。
求めるスキル
【AWS/Databricks/リモート併用】リース業向けデータレイクハウス基盤構築:クラウドエンジニアのフリーランス求人・案件
案件の内容
総合リース業向けのデータレイクハウス環境標準化プロジェクトです。AWS上でDatabricks(またはSnowflake)を利用したアーキテクチャの検討、データレイクハウス環境の構築方針策定、権限設計、ネットワーク設計、監視設計を担当いただきます。
求めるスキル
【Databricks/Python/常駐】金融機関向けデータ基盤:データエンジニアのフリーランス求人・案件
案件の内容
金融機関向けデータ基盤構築プロジェクトにて、Databricksを活用したデータ整備を担当。データマート構築やデータパイプライン実装を中心に、設計内容を踏まえたデータ加工・整備を推進します。
求めるスキル
【Snowflake/Databricks/フルリモート】データガバナンス・データ基盤コンサルティング:データアーキテクトのフリーランス求人・案件
案件の内容
データ活用基盤に関する複数プロジェクトにおいて、データマネジメント領域の上流支援を担当。SnowflakeやDatabricksを活用したデータ基盤整備に加え、データガバナンスやメタデータ管理の仕組みづくりを推進します。
求めるスキル
【Databricks/SQL/常駐】金融向けデータ基盤アーキテクト支援:アーキテクトのフリーランス求人・案件
案件の内容
金融機関向けデータ活用基盤構築プロジェクトにて、データアーキテクトとして参画。Databricksを活用したデータ基盤の設計を中心に、データモデルやパイプライン設計、技術方針の策定など上流工程を担当。開発メンバーへの設計方針展開や品質を考慮したアーキテクチャ設計を推進します。
求めるスキル
【Snowflake/フルリモート】データガバナンス・データ基盤コンサルティング支援:戦略系コンサルタントのフリーランス求人・案件
案件の内容
データ活用基盤に関する複数プロジェクトにおいて、データマネジメント領域の上流工程を担当。データ基盤整備に加え、データカタログ/メタデータ管理、アクセス権限設計などのガバナンス整備を推進し、顧客とのディスカッションを通じて課題整理〜方針策定〜要件定義まで主体的にリードする。
求めるスキル
【Databricks/Python/常駐】金融向けデータ基盤開発支援:データエンジニアのフリーランス求人・案件
案件の内容
金融機関向けデータ活用基盤の構築プロジェクトにて、Databricksを活用したデータ整備(データマート作成、データパイプライン構築、データ加工・集計処理、ETL/ELTの開発・改善)を担当。設計内容を踏まえた実装を推進いただきます。
求めるスキル
【Python/SQL/常駐】金融機関向けDatabricksデータパイプライン開発:データエンジニアのフリーランス求人・案件
案件の内容
金融機関向けDatabricksを利用したデータパイプライン開発案件です。Python・SQLによるデータ加工・データマート開発、データ基盤の開発・改善を担当いただきます。
求めるスキル
【データアナリスト/SQL/常駐】ゲームサービス データ分析:アナリストのフリーランス求人・案件
案件の内容
自社ゲーム/サービスに蓄積された大量データをもとに、仮説構築から施策提案までを行い、ゲームクオリティ向上やサービス改善に貢献していただきます。SQL集計・レポート作成、施策検証、分析ツールでの可視化、新しい数値指標の発見、モデリングなどが主な業務です。
求めるスキル
【Power BI/PoC/リモート併用】総合リース業向けPower BI構築:データエンジニアのフリーランス求人・案件
案件の内容
Power BIのPoC(概念実証)案件です。顧客の既存BIツール更改に伴い、Power BIで現行機能の再現性を検証いただきます。ダッシュボードや抽出条件を利用したデータダウンロードツールとしての活用を検証します。
求めるスキル
【Databricks/Apache Spark/リモート併用】データ基盤の設計・構築(担当):データエンジニアのフリーランス求人・案件
案件の内容
Databricks基盤の設計・構築・設定作業を担当いただきます。ワークスペース設計、権限設定、クラスタ設定対応を実施し、リードの指示のもと設計書作成および構築作業を担当します。試験工程の対応支援も行います。データパイプラインはスコープ外です。
求めるスキル
【Databricks/データ基盤/リモート併用】データ基盤の設計・構築(担当):データエンジニアのフリーランス求人・案件
案件の内容
Databricks基盤の設計・構築・設定作業を担当いただきます。ワークスペース設計、権限設定、クラスタ設定対応、リードの指示のもと設計書作成および構築作業、試験工程の対応支援を実施します。データパイプラインはスコープ外です。
求めるスキル
【Databricks/データ基盤/リモート併用】データ基盤の技術リード:データエンジニアのフリーランス求人・案件
案件の内容
Databricksを中心としたデータ基盤の技術リードを担当いただきます。基盤設計(アーキテクチャ/セキュリティ/ワークスペース構成)の方針策定、顧客との技術的論点整理および設計方針の説明、PoC環境を踏まえた本番化に向けた構成整理、必要に応じてSnowflake等との役割分担整理を行います。データパイプラインはスコープ外です。
求めるスキル
【Snowflake/Databricks/リモート併用】AIガバナンスソリューション企画支援:コンサル/プランナーのフリーランス求人・案件
案件の内容
大手ITコンサルファーム向けにAIガバナンスソリューションの企画・型化を支援いただきます。既存AIガバナンスルールの詳細化と、データ基盤上に実装する際の具体的な方式検討、運用フロー・運用ルールの設計およびドキュメント化を担当いただきます。
求めるスキル
【PHP/Laravel/フルリモート】製造業向けDX SaaS開発:バックエンドエンジニア/PLのフリーランス求人・案件
案件の内容
製造業向けDXマルチテナントSaaSの設計・実装案件です。PHP(Laravel)でのWebアプリケーション設計、AWS基盤構成、API設計、DBスキーマ設計、性能改善、コードレビュー、技術的メンタリングが主な業務です。
求めるスキル
【Python/BigQuery/リモート併用】不動産テック企業向けデータ分析基盤構築:データエンジニアのフリーランス求人・案件
案件の内容
スタートアップの不動産テック企業のデータ分析基盤構築およびレコメンド機能開発をご担当いただきます。DWH/ETL領域を中心に、Pythonを用いたデータ処理と分析基盤設計・実装を推進します。
求めるスキル
【Apache Spark/OCI/リモート併用】OCI Dataflow構築・チューニング:データエンジニアのフリーランス求人・案件
案件の内容
OCI環境においてDataflowを使用したバッチ処理稼働に伴う、各種パラメータ設計・設定、サイジング、性能問題発生時のチューニングを担当いただきます。
求めるスキル
1 - 20/件 全130件
Apache Sparkのフリーランス案件・求人に関する情報
Apache Sparkのフリーランス求人・案件について
Apache Sparkとは
Apache Sparkは、大規模データの高速処理を実現するオープンソースの分散処理フレームワークです。メモリ内(インメモリ)でデータを処理する仕組みにより、従来のHadoop MapReduceと比較して飛躍的に高速なデータ解析が可能であり、現在のビッグデータ処理におけるデファクトスタンダードとなっています。
主な特徴と役割
バッチ処理、ストリーミング処理(Spark Streaming)、機械学習(MLlib)、SQLクエリ(Spark SQL)など、多様なワークロードを単一のプラットフォームで統合的に扱える点が最大の特徴です。主にPython (PySpark)、Scala、Javaを用いて開発され、データパイプラインの構築や大規模ログ解析などで中心的な役割を果たします。
市場動向と将来性
AWS (EMR, Glue) や Google Cloud (Dataproc) といったクラウドサービスでの採用が進んでおり、データエンジニアやデータサイエンティストとしてのフリーランス案件は非常に豊富です。特に大規模データを扱うAI開発やデータ基盤構築の現場では必須スキルとされ、高単価で安定した需要が見込まれます。
