=========================
【内容】
某ゲーム会社様にて運用中のデータ分析基盤(Redshift)の、Google Cloud環境への移行。
Google Cloud環境では、DWHとしてBigQueryを利用し、データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定。
【主な作業内容】
1.バッチ処理コード移行(Java(Spling Boot)→ Google Cloud Composer + Google Data Fusion + dbt)
(実装、単体テスト、結合テスト、システムテスト)
2.SQL構文修正(Redshift(PostgresSQL) → BigQuery)
(実装、単体テスト、結合テスト、システムテスト)
3.テーブルデータ移行(Redshift → BigQuery)
(テーブル設計・実装、データ移行、データ検証)
━━━━━━━━━━━━━━━━━━━━━━━━━
【スキル】
・SQL に関する設計・実装経験
・Python3 に関する設計・実装経験
・Gitの使用経験
・Shell に関する設計・実装経験
・パブリッククラウド(AWS、Google Cloud、Azure等)の開発利用経験
・Google Cloud Data Analyticsサービス(BigQuery、Composer、Data Fusion、Dataproc、Cloud Storage等) に関する知識
・プロジェクト管理ツール(JIRA、Backlog、Redmine等)の利用経験
・オンラインコミュニケーションツール(Slack、Google Meet、Zoom等)の利用経験
・課題に関する共有と解決
━━━━━━━━━━━━━━━━━━━━━━━━━
【期間】随時〜長期
=========================
ROSCA株式会社は「目の前の"1"を大切に」をコンセプトとしたエンジニア特化型エージェントです。
あらゆる可能性を吟味し、ユーザーの考える理想以上のキャリアを実現することを追求しています。
その為に「シームレスキャリア」という雇用形態にとらわれない概念を提唱し、
少数精鋭だからこそできる全包囲型キャリアサポートを実現します。
★ROSCAマガジン★
https://note.com/takashi919/m/mcb682331058d
弊社の役員兼エージェント2人が、会社のこと、エンジニアキャリアのこと、エージェント業界のことを書いたnoteをまとめております。
なかなか他では聞けない業界裏話もあったりするので、ご興味のある方は是非ご一読ください!