原則フルリモート／Python／SOL／GCP／AWS／Git／データ分析

■ 案件概要

動画配信などを通じて発生する大規模な視聴データ（秒間25万リクエスト超）を対象に、その収集・加工・蓄積までを一貫してご担当いただくデータエンジニアの募集です。GCP（Google Cloud Platform）を中心に、AWSなど複数のクラウドサービスを活用しながら、スケーラブルで柔軟性の高いデータ基盤を構築・運用しています。

【具体的な業務内容】
・データパイプラインの設計・実装（ETL/ELT含む）
・データレイク〜DWH／データマートの構築・管理
・クラウドサービスを活用した分散処理環境の設計・チューニング
・CI/CDやIaCを活用したインフラ自動化・運用改善
・ビジネス要件に基づく分析基盤の最適化
・パフォーマンス向上やスケーラビリティの検討・改善

■ スキルセット

〇 必須

・Pythonによる開発経験
・SQLを用いたデータ処理・分析経験
・パブリッククラウド（特にGCP/AWS）を用いた開発・運用経験
・Gitなどのバージョン管理ツールの使用経験
・データ分析や基盤構築の実務経験

〇 歓迎

・Airflow / DigDag / Azkaban などのワークフロー管理ツールの使用経験
・DevOps／SREに関する知識（GitHub Actions, Ansible, CI/CDなど）
・高負荷対応・パフォーマンスチューニングの経験
・Docker / Kubernetes 等のコンテナ技術に関する経験
・データマネジメントプラットフォーム（DMP）等の構築経験
・機械学習／統計解析などを用いたビジネス課題の解決経験

〇 こんな方を歓迎します

・ビッグデータや動画視聴データに興味がある方
・スケーラブルなデータ基盤の構築・運用に挑戦したい方
・テレビやエンタメ業界に関心があり、業界の変革に貢献したい方
・チームでの協働や情報共有を大切にしながら働ける方
・最新技術のキャッチアップやトライアルを楽しめる方

 
応募URL：https://techdirect.jp/jobs/55389/apply/1
 

■ 勤務条件

• 勤務形態：原則フルリモート（全国どこからでもOK）
• 清算幅：140-180h（予定）

■ その他の情報

• 年齢：50歳以下
• 面談回数：1回以上（予定）

■ 開発環境

使用言語：Python, SQL, JavaScript
主要クラウド：Google Cloud Platform（BigQuery, Dataform, Workflows, CloudRunなど）
データ収集・転送：Fastly
インフラ管理：Terraform
CI/CD：GitHub Actions
コミュニケーション：Slack
その他：GitHub, VSCode, Vim（エディタは自由）

■ こんな方におすすめ

・Pythonによる開発経験がある方
・SQLを用いたデータ処理・分析経験がある方
・パブリッククラウド（特にGCP/AWS）を用いた開発・運用経験がある方
 

（案件番号：A000011248）