Hiveの業務委託案件・フリーランス求人一覧

Hiveの業務委託案件・フリーランス求人一覧

全 46 件中 1-40件表示
募集中1ヶ月前

Treasure Data CDP内の開発作業

250,000円〜400,000円/月
週5から
東京都 港区
業務委託(フリーランス)
職務内容

Treasure Data CDP内の開発作業。他システムからのIF受信、テーブル取込み。ワークフロー内のデータ結合、抽出処理。バッチ処理のジョブスケジューリング。詳細設計、製造、単体試験、結合試験、切替作業、現行調査。

募集中2ヶ月前

【Java】ビッグデータ分析システム開発案件

〜800,000円/月
週5から
確認中
業務委託(フリーランス)
職務内容

Hive/Hadoopによるビッグデータ分析プロジェクトです。 開発手法はアジャイルを採用しており、コミュニケーションも重視しながら開発を進めています。稼働も安定しているため、残業も少ない現場です。ビッグデータ関連の案件をお探しの方は是非お問い合わせください。

募集中2ヶ月前

【Hadoop/Spark/Kafka/Hive】広告プラットフォームの開発・運用(ビッグデータ処理)案件

〜1,000,000円/月
週5から
確認中
業務委託(フリーランス)
職務内容

広告プラットフォームの開発・運用をご担当いただきます。 具体的な業務内容はデータ処理フレームワークおよびテクノロジを使用した大規模なバッチおよびリアルタイムのデータ・パイプラインの構築・保守・運用 、適切なアーキテクチャ選定、および開発・運用プロセスを推進するためのエンジニアリングチーム(または、プロジェクトチーム)のリード、実装における技術選定(アーキテクチャと開発プロセス)および本番システムの品質担保(運用・保守)です。

募集中2ヶ月前

【DWH / クラウド構築 / 基本リモート】超大規模ゲームにおけるデータ分析基盤開発・運用

900,000円/月
常駐
要確認
渋谷駅
業務委託(フリーランス)
職務内容

累計利用者数5,000万人を超える人気タイトルゲームを中心とした、 大規模データの分析基盤を支えるエンジニアを募集します。 BigQueryやGoogleCloudを活用したデータパイプラインの構築から、 BIツールを用いた可視化、AIエージェントの活用まで、 裁量を持って取り組める非常にやりがいのある案件です。

募集中3ヶ月前

【リモート併用/データ分析】生命保険向けBSA・システム分析業務

910,000円〜990,000円/月
一部リモート
要確認
東京都
業務委託(フリーランス)
職務内容

大手生命保険会社向けの業務分析およびシステム分析業務。要件定義からデータモデリング、データフロー設計、開発チームとの連携による仕様策定や成果物のレビューまで幅広く担当いただきます。日英バイリンガルスキルがある方を歓迎し、Hadoop/Spark環境での分析業務も含まれます。 【技術スタック】 ・データベース:Oracle、MS SQL Server、MongoDB ・ビッグデータ基盤:Hadoop、HBase、Spark ・OS:Linux

募集中5ヶ月前

【SQL】【SE】Treasure Data CDPワークフロー開発の求人・案件

300,000円〜350,000円/月
一部リモート
要確認
東京都 港区
業務委託(フリーランス)
職務内容

Treasure Data CDP内の開発作業にご参画していただきます。\n\n主に下記作業をご担当いただきます。\n・他システムからのIF受信、テーブル取込み\n・ワークフロー内のデータ結合、抽出処理\n・バッチ処理のジョブスケジューリング\n\n・開発\n-詳細設計 / 製造 / 単体試験 / 結合試験 / 切替作業 / 現行調査\n\n・利用部門との調整\n-利用部門との要件調整 / スケジュール調整 / タスク調整など\n\n最寄り駅:竹芝駅

募集中5ヶ月前

【SQL】【サブリーダー】Treasure Data CDPワークフロー開発の求人・案件

400,000円〜500,000円/月
一部リモート
要確認
東京都 港区
業務委託(フリーランス)
職務内容

Treasure Data CDP内の開発作業にご参画していただきます。\n\n主に下記作業をご担当いただきます。\n・他システムからのIF受信、テーブル取込み\n・ワークフロー内のデータ結合、抽出処理\n・バッチ処理のジョブスケジューリング\n\n・開発\n-詳細設計 / 製造 / 単体試験 / 結合試験 / 切替作業 / 現行調査\n\n・利用部門との調整\n-利用部門との要件調整 / スケジュール調整 / タスク調整など\n\n・進捗管理\n-メンバのCDPの開発の進捗管理\n-元請への相談 / 連絡 / 報告\n-クライアント様との会話 / チャットでの各種調整\n\n最寄り駅:竹芝駅

募集中1年前

大手CRM戦略の立案・実施・分析/~85万円

応相談
常駐
週5から
東京都 渋谷区 渋谷
業務委託(フリーランス)
職務内容

★【~85万円/フリーランス】大手CRM戦略の立案・実施・分析/~85万円※30~50代活躍中!!【業務内容】 ・分析基盤整備 └ダッシュボードの作成(KPIツリー、目的別ボード) └ユーザー行動の可視化(推移、利用特性) └分析基盤整備の推進(データ取得の推進、課題点洗い出し) ・分析 └データを用いた仮説検証(機能、UI改善、施策) └ユーザー行動(数値化、可視化、セグメント分類) └効果検証(広告、キャンペーン、メールマガジン等) └得られたデータを元にしたインサイトの提供 20代~40代中心の現場となっております【求める人物像】 【必須条件】 ・過去1年以内に当社への応募履歴のない方 ・業務委託(準委任契約)が可能な方...

募集中3年前

データ連携システム・BIツール保守開発エンジニア/六本木1丁目/JAVA/Python/HIVE

750,000円〜850,000円/月
フルリモート
週5から
東京都
業務委託(フリーランス)
職務内容

今回は、全事業に関わる基幹系システム間のデータ自動連携システムのローコード開発および運用保守担当を募集しています。 システム担当といっても、要件定義や設計も含めて実施いただく想定です。 購買、販売、就労、給与、会計など複数の基幹系システムを繋ぐ仕組みづくりを担うため、システムの知識はもちろん、 事業内容や経理業務・会計についても理解を深めていくことが求められます。 ビジネスの仕組みを多方面から理解し、どのような方法を取るべきか検討・実行していく仕事のため、 常に新しい学びが必要であるという難しさもある反面、知識の幅が広がり成長できるという大きな達成感も得られます。

募集中3年前

フルリモート/Python/Hive/Bigqeryデータ基盤整備

〜800,000円/月
フルリモート
週5から
東京都
業務委託(フリーランス)
職務内容

業務内容」 1. AWSのデータレイク(S3+Glue data catalog)からBigqueryへのデータ移行作業 2. GCPデータ基盤の整備(ワークフローエンジン導入等) (2については本人の意向、能力等を鑑みて判断とさせてください) 開発環境 [言語] Python, Hive, Spark [AWS] EMR, Glue, Athena, Lambda, APIGateway [GCP] BigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows [CI・CD・その他] Terraform, CircleCI, GithubActio...

募集中2ヶ月前

【AWS/GCP/Python/DWH】サーバーサイドエンジニア

〜800,000円/月
一部リモート
要確認
東京都 港区 六本木一丁目
業務委託(フリーランス)
職務内容

【概要】 クライアント内のデータレイク・DWH管理するDWHチームの募集になります。 アダルトコンテンツ:有 【主な作業内容】 1. AWSのデータレイク(S3+Glue data catalog)からBigqueryへのデータ移行作業 2. GCPデータ基盤の整備(ワークフローエンジン導入等) (2については本人の意向、能力等を鑑みて判断とさせてください) 【求める人物像】 ・根気よく問題と向き合い解決まで取り組んでいただける方 ・課題を俯瞰的に捉え、似た課題を効率的に解決するような創意工夫が行える方 【開発環境】 [言語] Python, Hive, Spark [AWS] EMR, Glu...

募集中2ヶ月前

(リモート)【Java】カード基幹系システム オープン系開発

750,000円/月
一部リモート
要確認
大崎
業務委託(フリーランス)
職務内容

・カード基幹系システム開発 ・現行システム(COBOL)から新システムへのマイグレーション開発(ホスト→Hadoop基盤へのデータ連携) ・工程:基本設計、詳細設計、製造、テスト、本番リリース、運用/保守 週5日、リモート

募集中5ヶ月前

【Treasure Data CDP/SQL/Digdag】CDPワークフロー開発 サブリーダー枠

450,000円〜550,000円/月
一部リモート
週5から
東京都
HiveSQLDWH3
業務委託(フリーランス)
職務内容

Treasure Data CDP上での開発案件です。IF経由で他システムから受信したデータの取込み、ワークフロー内でのデータ結合・抽出、バッチ処理のジョブスケジューリングを担当します。 担当範囲は、詳細設計~製造~単体/結合試験~切替作業、現行調査まで。利用部門との要件・スケジュール・タスク調整などのコミュニケーション対応も含みます。 就業場所は東京ポートシティ竹芝オフィスタワーで、平日9:00-18:00のオンタイム。現場常駐メイン+在宅併用の働き方です。 面談はWEB1回(スキルにより事前面談の可能性あり)。精算は140-190h(固定の月変動なし)。外国籍は不可で、チーム構成の都合により女性のみの募集です。

募集中8ヶ月前

Python/大手デジタルマーケ企業の営業支援プラットフォームにおけるバックエンド開発案件・求人

〜900,000円/月
要確認
西新宿
業務委託(フリーランス)
職務内容

■仕事内容 開発プロジェクトチームに入り、弊社エンジニアと一緒に開発に従事していただきます。 【具体的な業務イメージ】 ■要件定義・設計 ・ステークホルダーとの開発要件のすり合わせ、設計、実装方針の策定 ・レビュー、コードレビューなど品質管理 ・インフラ設計、パフォーマンス最適化 ■新規プロダクト開発 / 既存サービスの拡張開発 ・機能開発における実装とテスト ・保守・運用を含む開発作業全般 ・デリバリー対応、障害対応 下記マインドを持っている方を募集いたします。 ・自立自走、課題や問題のキャッチアップを自ら行える ・関係者を巻き込んで率先して動ける ・コーディング / UTが自立して出来る ・未...

募集中9ヶ月前

【Python/AWS/西新宿/一部リモート】大手デジタルマーケ企業・営業支援プラットフォームのバックエンド開発

600,000円〜650,000円/月
一部リモート
週5から
西新宿駅
業務委託(フリーランス)
職務内容

大手デジタルマーケティング企業が提供する営業支援プラットフォームのバックエンド開発プロジェクトに参画いただきます。 開発チームの一員として、要件定義・設計から実装・テスト・運用保守まで幅広く担当していただきます。 ステークホルダーとの要件調整、設計・実装方針の策定、コードレビューや品質管理、インフラ設計やパフォーマンスチューニングなど、開発全般に主体的に関わっていただくポジションです。 新規プロダクトの立ち上げや既存サービスの拡張開発、デリバリー対応、障害対応も含みます。 現場はMac中心で、Python3を主軸とした開発環境となっています。週3日出社+週2日リモートのハイブリッド勤務です。 募集背景 事業拡大および...

募集中11ヶ月前

Ruby/自社DMPプロダクトバックエンド開発案件・求人

〜1,000,000円/月
要確認
虎ノ門
業務委託(フリーランス)
職務内容

自社で提供するDMP(データマーケティングプラットフォーム)の開発業務をご担当いただきます。 Ruby on Railsによるアプリケーションと分析、媒体連携用データを保持する Google Cloudのデータ基盤を開発、運用します。 ▼工程 基本設計から実装、保守運用まで実施いただきます。 ビジネス要件はビジネス担当部門が行います。 設計に必要な要件の明確化などのコミュニケーションは適宜行っていただきます。 ▼主な業務内容 ・管理画面の開発、保守、運用 ・分析データ基盤の開発、保守、運用

募集中1年前

【フルリモート】クラウド分析基盤のアプリケーション保守エンハンス

応相談
フルリモート
週5から
東京都 港区
業務委託(フリーランス)
職務内容

★【~65万円/フリーランス】クラウド分析基盤のアプリケーション保守エンハンス※30~50代活躍中!!【業務内容】 ・ビッグデータ分析基盤のアプリケーションエンハンス保守 ・GCP及び周辺ミドルウェアのEOSLに伴う、既存アプリケーションのバージョンアップ対応 ・各所からの要望によるデータレイクへの新規ETL対応 ・設計から運用保守までの一通りの作業(影響調査、技術調査、設計、実装、テスト、リリース等) ※保守フェーズのため、基本的には新規開発はなく、調査やEOSL、ETL対応がメインです 【求める人物像】 【必須条件】 ・過去1年以内に当社への応募履歴のない方 ・業務委託(準委任契約)が可能な方 ・100%(平日の週5日)稼...

募集中1年前

≪Pythonエンジニア≫大手検索ポータルサービス業務

応相談
常駐
週5から
東京都 千代田区
業務委託(フリーランス)
職務内容

★【~55万円/フリーランス】≪Pythonエンジニア≫大手検索ポータルサービス業務※30~50代活躍中!!【業務内容】 某大手ポータルサイトが運営する、コンシューマ向けWEBサービス業務です。 データの整備やジョブの作成などがメインの業務となりますので、 コーディングをバリバリやるようなシステム開発ではないことにご留意ください。 期待されているのはデータのプロフェッショナルという立ち位置になります。 機械学習やサイエンス領域の知見をお持ちの方をお願い致します。【求める人物像】 【必須条件】 ・過去1年以内に当社への応募履歴のない方 ・業務委託(準委任契約)が可能な方 ・100%(平日の週5日)稼働が可能な方。 ※副業希望の方...

募集中2年前

【データ加工分析/フルリモート】開発グループ_SQLエンジニア募集

600,000円〜800,000円/月
フルリモート
要確認
データ加工分析
業務委託(フリーランス)
職務内容

案件概要:開発グループ_SQLエンジニア募集 業務内容: CRM施策に関連するデータ加工/抽出/分析を行う業務 メールマガジン、Push通知、広告配信等の配信に必要なセグメント抽出用クエリ作成 L事前データ調査やユーザーリストの作成 事業KPI設計 成果レポート用クエリ作成 BIツール移行対応 施策ヒアリング等の要件定義 開発環境: PC:Mac(JIS/US 選択可) ミドルウェア:MySQL、PostgreSQL 管理ツール:Slack、Jira、Confluence、Git その他:BigQuery、LookerStudio、Redash、Hive 業務環境: テクノロジー部全体:31名 開発グループメンバー:20...

募集中3年前

フルリモート【Python/AWS/GCP】自社データインフラのデータ移行作業

750,000円〜850,000円/月
フルリモート
週5から
東京都
業務委託(フリーランス)
職務内容

・某ITメガベンチャーにて自社データインフラグループのデータ移行作業を担当頂きます。 1. AWSのデータレイク(S3+Glue data catalog) → BigQueryへのデータ移行作業 2. GCPデータ基盤の整備(ワークフローエンジン導入等) (2については応募者の意向、能力等を鑑みて決定) 技術環境 O S :Linux 言 語 :Python, Hive, Spark Cloud :AWS, GCP AWS  :EMR, Glue, Athena, Lambda, APIGateway GCP  :BigQuery, GCS, Pub/Sub, Dataflow, CloudCo...

掲載終了5ヶ月前

【OSS系インフラ】機器情報を集約するDataLakeの取り組み/ハイテク製品メーカーのエンジニア求人・案件 IT

〜800,000円/月
常駐
週5から
六本木一丁目駅もしくは溜池山王駅(長崎と熊本への出張が何回か発生する可能性あり)
業務委託(フリーランス)
職務内容

・DataLakeの基盤となるインフラ基盤の構築(設計からテスト) ・Apache Kafkaを用いた分散ストレージへの高速なデータ格納、 分析基盤を見据えた構造化データ(Apache ORC)変換環境の構築作業 ・プライム側Azure環境で構築とお客様環境のオンプレ環境での構築作業 ・Azure環境はプライムメンバが開発作業をするための環境として利用想定 ・Azure環境はインフラ基盤の設計を実施するための検証環境としての意味合いも持つ ・最終的にお客様のオンプレ環境に基盤を構築

掲載終了5ヶ月前

【渋谷】データエンジニア/メディア・エンターテイメントのエンジニア求人・案件 IT

〜600,000円/月
常駐
週5から
渋谷
業務委託(フリーランス)
職務内容

アプリにおけるユーザ?動データの取得と管理 ・ログ設計とテーブル設計 ・GoogleTagManagerによるログ設定 ・集計バッチ作成 ・レポート作成

掲載終了5ヶ月前

MNO利用者獲得に向けたデータ分析支援/通信のエンジニア求人・案件 システムエンジニア・プログラマー / データサイエンティスト / マーケティング / デジタルマーケティング / データサイエンティスト/アナリスト

〜1,200,000円/月
一部リモート
週5から
東京都 世田谷区 世田谷
HiveDWHSQL1
業務委託(フリーランス)
職務内容

・DWH(SPDB)をソースにAIエージェントを活用した分析 ・MNO利用者獲得に向けたデジマケツールと連携する基盤構築 ・ペルソナ拡充に向けた分析対応 ・データサイエンティストの支援

掲載終了6ヶ月前

MNO利用者獲得に向けたデータ分析支援/通信

〜1,200,000円/月
一部リモート
週5から
東京都 世田谷区 世田谷
業務委託(フリーランス)
職務内容

・DWH(SPDB)をソースにAIエージェントを活用した分析 ・MNO利用者獲得に向けたデジマケツールと連携する基盤構築 ・ペルソナ拡充に向けた分析対応 ・データサイエンティストの支援

掲載終了1年前

Python/インターネットTVアプリにおけるデータエンジニアリング案件・求人

〜800,000円/月
要確認
渋谷
業務委託(フリーランス)
職務内容

某有名TVアプリにおけるユーザ行動データの設計と管理全般に携わっていただきます。 作業内容 ・施策や機能追加における分析要件のヒアリング ・ログ設計とテーブル設計 ・クライアントエンジニアへログ仕様説明 ・GoogleTagManagerの設定 ・行動ログの発火状況や品質管理

掲載終了1年前

Scala/ サーバーサイドエンジニア案件

応相談
要確認
東京都 渋谷区 渋谷
業務委託(フリーランス)
職務内容

広告技術のDSP開発をお願いします。 本事業部では、各社とのシステム連携により広告を表示しています。 1つのリクエストに対して100ミリ秒で応答を返すという制限(低レイテンシ)と 秒間1万を超えるリクエストを処理(ハイスループット)するシステムを作ります。 メイン言語はScalaを利用し、インフラ環境はGoogleCloudPlatformを利用しています。 エンジニア5人程度のチームでアジャイル開発のプロセスをベースにカンバンなどで作業進捗を確認しながらすすめ、 ドキュメントはコミュニケーションと保守に必要な最低限の情報で作成し、システムの実装、開発、運用をしています。

掲載終了1年前

【Python】収集データ分析システム開発

750,000円〜810,000円/月
一部リモート
要確認
東京都
業務委託(フリーランス)
職務内容

メディアの収集データを分析してくれるシステムを開発していく案件での人員募集になります。 元請け側のチームに参画し、 維持管理しているシステムの定常業務+案件が発生したときに対応するメンバーを募集します。 直近だとSnowflakeに移行する案件などが維持管理に移ったりしているのでそういった案件を維持しつつ発生案件に対応していきます。 基本は、Snowflakeの開発案件が多いチームです。 長期的に支援いただける要員を探しております。 ※Pythonとrubyとでそれぞれ案件が複数あり、現状はRuby案件に入っていただく予定です。 その為、PythonかRubyいずれでも技術をお持ちの方を探しております。

掲載終了7年前

モバイルアプリデータ解析支援

〜1,200,000円/月
週3から
渋谷区
業務委託(フリーランス)
職務内容

モバイルアプリの解析・マーケティングツールの提供、 アプリの企画・戦略コンサルティングを行っている企業にて 以下の作業を行う。 ・分析に必要なデータパイプラインの構築や中間データの整備 ・統計的手法や機会学習等の技術を用いて設計されたアルゴリズムやモデルの実装

掲載終了7年前

【SQL,R】不動産広告事業向けデータ分析/週3~5日

〜1,200,000円/月
週3から
確認中
業務委託(フリーランス)
必須スキル

・ECサイトの分析経験を有すること(Webサイトのログ解析) ・データ分析スキルを有すること -R言語、SQL、Apache Hive、Python ・Linuxのコンソールオペレーションができること ・基礎集計スキル (ExcelやCSV生データから、どういうデータが含まれているかを半日程度で取りまとめられる) ・コミュニケーション能力が高く、齟齬を発生させない ・分析結果レポートの作成とプレゼンテーションができること

掲載終了5ヶ月前

ゲーム機用オンラインサービスに関するビッグデータ分析基盤構築のエンジニア求人・案件 SAP / SAP(CO) / SAP(CO-PC) / IT

〜650,000円/月
常駐
週5から
東京都 港区
業務委託(フリーランス)
職務内容

・家庭用ゲーム機用オンラインサービスに関するビッグデータ分析基盤の構築、サービス開発および運用 ・クラウドサービスを用いたETLアプリケーション、Web API開発 ・システム要件定義 、アーキテクチャ設計 ・Lightweight Language言語を用いた開発 ・Hadoop、Hive、Spark、ParquetなどのBigData解析技術を用いた開発 ・Linuxを用いたサーバ開発・運用 ・RDBやKVSを用いた開発 ・システムのテスト及びテストの自動化 ・アジャイル開発

掲載終了5ヶ月前

【Python/Ruby】自社内システム開発支援/メディア・エンターテインメントのエンジニア求人・案件 IT

〜600,000円/月
常駐
週5から
渋谷
業務委託(フリーランス)
職務内容

・自社内システム開発運用保守支援 ・ビッグデータの解析と分析 ・データ設計 ・集計ジョブ開発 ・データ管理 ・保守運? ・開発環境:使??語 Python, Ruby, Java サーバOS Centos6系 バージョン管理システム GitHub Enterprise クラウド AWS(S3), GCP(GCS, BQ) OSS MySQL, Hadoop, Hive, Kafkaなど CI Jenkins コミュニケーションツール Sla

掲載終了6ヶ月前

プロダクト開発PMO

〜1,700,000円/月
常駐
週5から
東京都
業務委託(フリーランス)
職務内容

・元請け会社プロダクト開発のPMO ・開発を円滑に進めていくための管理業務、推進業務 ・言語:Rail、Java、Scala、Hive、Presto、Vue.js ・環境:AWS

掲載終了1年前

Python/広告事業のデータマイニング・機械学習エンジニア募集案件・求人

〜900,000円/月
要確認
虎ノ門
業務委託(フリーランス)
職務内容

複数ある自社広告配信プロダクトの100億レコード以上/日のログを分析し、広告配信を最適化する業務を担当いただきます。 【主な仕事内容】 ・ビジネスインパクトが大きなKPI改善の見極め ・KPI(CPCなど)最適化の改善及び運用

掲載終了1年前

システム運用エンジニア案件

830,000円〜900,000円/月
一部リモート
要確認
東京都 リモート
業務委託(フリーランス)
職務内容

1. AWSのデータレイク(S3+Glue data catalog)からBigqueryへのデータ移行作業 2. GCPデータ基盤の整備(ワークフローエンジン導入等) [開発環境] ・言語 Python, Hive, Spark ・AWS EMR, Glue, Athena, Lambda, APIGateway ・GCP BigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows ・CI,CD,その他 Terraform, CircleCI, GithubActions, digdag, embulk [担当工数] 1.開発/保守改修 2.基...

掲載終了1年前

データ基盤整備案件

830,000円〜900,000円/月
一部リモート
要確認
東京都 リモート
業務委託(フリーランス)
職務内容

1. AWSのデータレイク(S3+Glue data catalog)からBigqueryへのデータ移行作業 2. GCPデータ基盤の整備(ワークフローエンジン導入等) [業務環境] メンバー:3名(TL1名、エンジニア2名) ※部全体:50名弱 [開発環境] ・言語 Python, Hive, Spark ・AWS EMR, Glue, Athena, Lambda, APIGateway ・GCP BigQuery, GCS, Pub/Sub, Dataflow, CloudComposer, Dataproc, Workflows ・CI,CD,その他 Terraform, CircleCI, GithubActio...

掲載終了1年前

【HTML/CSS/JavaScript】UI/UXデザイナー案件

830,000円〜900,000円/月
要確認
東京都 港区 六本木
業務委託(フリーランス)
職務内容

日本最大級のサービス(アプリ含む)のUI/UXデザイナーを募集致します。 化粧品口コミサイトのほか、ECサイトも運営し、首都圏を中心に実店舗も展開している企業様で 複数サービスがあるため、ユーザー向けサービス、ビジネス(法人)向けサービスと横断的に携わるチャンスがあります。 【業務詳細】 ■ユーザーストーリーに基づいたモックアップの作成 ■WEBサイトやアプリのサービス設計、情報設計、ユーザビリティ・アクセシビリティ設計 ■ワイヤーフレーム、プロトタイプの作成 ■マニュアル作成など運用チームやCSチームとの連携 ■UIデザイン ■エンジニアと連携してソースコードの調整やテスト業務 ■サービステストの計画や実施 ...

掲載終了1年前

【JavaScript】フロントエンジニア案件

830,000円〜900,000円/月
要確認
東京都 港区 六本木
業務委託(フリーランス)
職務内容

日本最大級のサービス(アプリ含む)をはじめとした自社サービスの制作がメインです。 設計段階からPJTに参加し、新サービスや既存改修のフロントエンド領域(HTML/CSS/JavaScript)を担当していただきます。 システム開発を伴う開発がメインとなるため、社内エンジニアと連携し、システム組み込み後もソースコードの調整やテスト業務など、サービスリリースの最終工程まで取り組んでいただきます。 またフロントエンド開発業務だけでなく、後輩育成やチームメンバーのコードレビューなど、クオリティ管理やチームマネジメントもお任せしていきます。 【業務詳細】 ■ユーザーストーリーに基づいたモックアップの作成 ■WEBサイトやアプリのサ...

掲載終了1年前

【Ruby・Python】広告配信プラットフォーム及びDSPバッチ開発案件

応相談
要確認
東京都 港区 表参道
HivePHPSQL7
業務委託(フリーランス)
職務内容

自社サービスである広告プラットフォームとDSPの開発における集計バッチ処理をメインに担当いただきます。 RubyとPythonによりバッチ処理の他HiveQL(SQLに似たもの)やAnsile、Hadoop、Hiveなどの運用にも携わっていただく予定です。 広告配信プラットフォームでは大規模な広告配信機能に加えて、レポーティング機能、セグメント管理機能、広告配信設定機能など 広告配信におけるPDCAサイクル実現を目的とした機能が盛り込まれています。 【開発環境】 言語:Python、Ruby OS:Linux、AWS DB:MySQL、Tokyocabinet その他:Hadoop、Ansible、Hive

掲載終了1年前

【Ruby on Rails】広告配信サービスの開発案件

1,000,000円〜1,080,000円/月
要確認
東京都 港区 表参道
業務委託(フリーランス)
職務内容

自社プロダクトであるDSPやSSP、新規開発中のDMP等のダッシュボード(管理画面)やAPIの開発を担当いただきます。 一般的なダッシュボード開発とは異なり、ダッシュボードチームの役割が大きく、以下のような実装にも携わっていただけます。 ・数万QPS(QPSは1秒間にアクセスされる回数)の配信で利用される処理の実装 ・集計基盤(Apache Hive)に格納された大量データにアクセスする処理の実装 【開発環境】 言語:Ruby、JavaScript OS:Linux DB:PostgreSQL FW:Rails、React+Redux その他:Git、Docker

掲載終了2年前

【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件

〜700,000円/月
一部リモート
週5から
東京都
業務委託(フリーランス)
職務内容

現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。 PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。 データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テー...

Hive案件の仕事内容

Hive案件は、データレイクやDWH上の大量データをSQL(HiveQLを含む)で加工・整形し、分析やプロダクト機能に渡すデータパイプラインを作る仕事が中心です。ログ設計やテーブル設計、他システムからのデータ取り込み、結合・抽出処理など、データの「入口から使える形にする」工程を担う案件が多く見られます。

あわせて、バッチ処理のジョブスケジューリングやワークフロー開発、保守エンハンス、移行(例:データレイクから別DWHへ)など運用寄りのテーマも目立ちます。Spark/Presto/BigQueryなどと併用され、要件調整や成果物レビューまで含めて横断的に動く役割を期待されることがあります。

一部では、広告配信やゲーム、テレビ視聴データなどの大規模分析基盤で、リアルタイム処理(KafkaやStreaming)やインフラ運用改善(EMR上の分散基盤)に踏み込む案件もあります。アプリケーション開発(管理画面/API)から集計基盤アクセスまでをつなぐ立ち位置もあり、データ基盤とプロダクトの距離が近い現場ほど裁量が広がりやすいです。

Hive案件で求められる必須スキル

必須としてまず重視されやすいのは、SQLを用いたデータ抽出・集計・結合の実務力です。求人では、テーブル結合を前提にクエリを自力で組み立てられること、既存クエリを読み解いて改修できることが求められやすく、Hiveは「Hive単体」よりもSQLベースのDWHを扱った経験の一部として見られる傾向があります。

次に、バッチ処理やデータパイプラインの設計・実装・テスト・運用の経験が重要になります。詳細設計から単体・結合試験、切替や現行調査までを担当する案件もあり、開発の一連工程を踏めることが応募判断の軸になりやすいです。データ品質の担保や、ログ/テーブル設計といったデータモデリング寄りのスキルが必須になるケースもあります。

加えて、Linux環境での開発・運用経験や、チーム内外との調整を含むコミュニケーションが要件に入ることが多く見られます。特に利用部門との要件・スケジュール調整、説明資料の作成などが発生する案件では、技術力に加えて「相手に伝わる形で整理する力」が必須スキルとして評価されます。

Hive案件であると有利な歓迎スキル

歓迎されやすいのは、Hiveと同じくSQLで扱う分散クエリエンジンやDWHの利用経験です。Presto(Trino)やBigQuery、Snowflakeなどの経験があると、実行基盤が変わる移行・併用の現場で立ち上がりが早くなります。Hive Metastoreなど周辺コンポーネントの理解が求められる、基盤寄りの案件も一部に見られます。

また、ワークフロー/ジョブ管理の知見は強い武器になります。DigdagやAirflow、Cloud Composer、Workflowsなどを用いたスケジューリングやymlでのジョブ定義、ETL/ELTの設計経験があると、単発の集計よりも「継続運用されるパイプライン」を任せてもらいやすくなります。データ移行やEOSL対応など、調査から計画・実装までを進める場面でも有利です。

さらに、クラウドやIaC、コンテナ、監視といった運用強化に関わるスキルが歓迎される傾向があります。Terraformなどで環境差分を管理できる、CI/CDでデータ処理のデリバリーを整える、パフォーマンス計測やモニタリングを行えると、データ基盤の改善テーマを持つ案件で評価されやすくなります。

Hive案件で評価されやすい実務経験

Hive案件で評価につながりやすいのは、「大量データを前提にした設計と改善」の経験です。数千万レコード規模の抽出・加工や、複数テーブルを跨ぐ集計を継続運用する中で、クエリの意図を保ったまま読みやすく整理する、処理時間やコストを意識してチューニングする、といった実績があると強みになります。

既存システムの保守・エンハンス、移行、バージョンアップ対応の経験も評価されやすい領域です。新規開発よりも、影響調査→設計→実装→テスト→リリースまでを安全に進める力が問われる場面があり、ログやアプリケーションログから課題発見し解決した経験は、データ基盤運用系の案件で特に刺さります。

加えて、非エンジニアや他チームと要件をすり合わせ、仕様や成果を説明できる経験は、役割を広げる鍵になります。分析要件のヒアリング、施策向けセグメント抽出、KPI設計、レポート作成などが含まれる案件では、単にクエリを書く以上に「意思決定に使える形に落とす」力が評価されやすいです。

Hive案件でよく使われる開発環境

HiveはHadoopエコシステムの文脈で使われることが多く、Spark、HBase、Kafka、Presto(Trino)などと並んで登場しやすいです。クラウドではAWS EMRやGCP Dataprocのようなマネージド基盤上で扱うケースが見られ、HiveQLの理解に加えて、分散処理の前提(データ形式や実行特性)を押さえていると参画後のキャッチアップが速くなります。

データ基盤の周辺には、BigQueryやRedshiftなどのDWH、S3やGCSなどのストレージ、Glue Data Catalogのようなメタデータ管理が組み合わさる構成が見られます。データ移行案件では、ソースと移行先が混在する期間が発生しやすく、同じSQLでも方言差や関数差を踏まえて切り替える力が求められます。

運用・開発のツールとしては、GitHub/GitLab、CI(CircleCIやGitHub Actions)、IaC(Terraform)、ワークフロー(Digdag、Airflow、Cloud Composer)などが登場します。単発の手作業ではなく、再現性のあるジョブ運用に寄せる現場ほど、リポジトリ運用やリリース手順の理解が重要になります。

Hive案件を選ぶときのチェックポイント

まず確認したいのは、Hiveが「主要な実行基盤」なのか「SQL基盤の候補の一つ」なのかです。求人にはHive/Presto/BigQuery/Snowflake等が並ぶことがあり、実際に主戦場がどこかで求められる知識が変わります。HiveQLの作成が中心なのか、移行や併用でクエリの書き換えが多いのかを面談で具体化するとミスマッチを減らせます。

次に、担当範囲がデータ加工だけか、ワークフローや運用改善まで含むかを見極めましょう。Digdag/Airflowなどのジョブ設計、監視・通知、障害対応、EOSL対応の有無で求められる動き方が変わります。詳細設計〜試験〜切替まで任される案件では、手順化やレビュー、リスク整理まで含めた進め方ができるかが重要です。

最後に、要件調整の相手と成果物の形式を確認するのが効果的です。利用部門との調整や、KPI/施策に直結するセグメント抽出、ダッシュボード移行などが含まれる場合、説明資料やレポート作成がセットになりやすいです。反対に、基盤運用改善寄りなら、インフラ担当との連携や運用手順の整備比率が高くなるため、得意領域に合うかを確認しましょう。

Hive案件の将来性・需要

求人を見る限り、Hiveは単独の専門技術というより、データレイク/DWHを支えるSQL基盤の一部として、引き続き実務で使われています。特に、EMR/Dataprocなどのマネージド環境や、Presto(Trino)と組み合わせた構成が見られ、既存基盤の運用改善や移行・統合の文脈で需要が続きやすい領域です。

また、データ活用が施策やプロダクト改善に直結する現場では、ログ設計やテーブル設計、品質管理といった上流の重要度が増しています。HiveQLで集計できるだけでなく、データの意味を保って加工し、再利用可能な形で提供できる人材は、データエンジニア寄りのポジションで評価されやすいです。

加えて、クラウド移行やワークフロー整備、CI/CDやIaCによる運用標準化など、「運用できるデータ基盤」を作る方向の案件が見られます。Hive経験を軸に、Sparkやワークフロー、クラウド運用の経験を積むことで、分析支援から基盤構築・運用改善まで対応範囲を広げやすいでしょう。

Hive案件のよくある質問

Hiveは「実務で何ができる」と応募しやすいですか?

HiveQLでのデータ抽出・結合・集計を自力で設計し、バッチとして定期実行できることが伝わると応募判断が進みやすいです。加えて、テーブル設計やデータ品質の確認、既存ジョブの改修経験まで示せると、運用を含む案件にも適合しやすくなります。

Hive以外のSQL基盤(BigQueryやPresto等)の経験は評価されますか?

評価されやすいです。求人ではHiveと並んで複数のSQLベースDWH/クエリエンジンが登場しており、方言差や実行特性の違いを踏まえて移行・併用できる経験は強みになります。特にデータ移行や基盤整備では、特定製品の経験より「切り替えを成立させた経験」が重視されます。

アプリ開発経験が少なくてもHive案件に参画できますか?

参画余地はあります。データ加工・抽出、ワークフロー運用、基盤保守など、必ずしもWebアプリ開発が中心でない案件が見られます。一方でPythonやJavaなどで周辺処理を書く場面もあるため、SQLを軸にしつつスクリプト開発やLinux運用の実績を補足できると選択肢が広がります。

インフラ寄り(EMR/Dataproc等)の案件では何がポイントになりますか?

分散基盤の運用維持管理、ログからの課題特定、ETL基盤としての設計理解がポイントになりやすいです。Hiveのクエリだけでなく、クラウドのマネージドサービス上でどう動いているか、障害時にどこを見て復旧・改善するかまで説明できると評価されやすくなります。

インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる

スマホを見る人
スマホを見る人

23万件以上のフリーランス案件から一括検索

エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。

あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。