◆必須:・Python経験(バッチ作成)が豊富な方(3年以上)
データの読み書きやpandasでのデータ加工など、データ分析系の
基本的な操作についての知識。
・以下の様な流れのバッチが作成できること。
ストレージ上でのデータ加工→データ取り込み→データ集計→
ストレージ上にデータ出力
・SQL作成
WITH句等を使用し、数百行レベルの複雑なクエリの作成。
window関数によるデータのソートなど。
提供されている関数を使用したデータの加工や集計。
・クラウドサービス利用経験
GCPでいうBQ、GCSに該当する機能の利用経験
◆尚可:・コミュニケーション
エンドユーザーの漠然とした要望に対し、直接コミュニケーションを
取りながら要件を聞き出し、要件定義を行う。
・Gitによるソースコード管理
・Linux環境での開発
・機械学習
◆作業内容:1.データマート構築1 バッチ開発・運用・保守
対象はダッシュボードを提供している社内向けソリューション。
各種バチサービスを使用し、Bigqueryでの集計を定期的に実行している。
バッチの機能追加や、運用時に問題が発生した場合の原因調査。
2.データマート構築2 バッチ開発・運用・保守
1は別の、ダッシュボードを提供している社内向けソリューション。
こちらはBigQueryでの集計は少なく、
Pythonによるデータ加工・集計が大部分を占めている。
バッチの機能追加や、運用時に問題が発生した場合の原因調査。
インプッを手動で用意することが多く、運用時の問題発生頻度が1より高い。
3.その他開発
・その他バッチ開発
新規リューションの開発等でバッチの作成依頼を都度頂いて対応する。
・過去作成したバッチの保守
過去に複のバッチを作成しており、エラー時には調査やリカバリーを行う。
・データ集計
BigQueryを使用したデータ集計を行う。
クエリとしては数百行程度になることがあるが、
既存のクエリをある程度使いまわせるため、
1からコーディングする機会は少ない。
◆開発環境:・GCP
(BigQuery, Cloud Storage, Cloud function, Workflows, Compute Engine, etc…)
・Python
・digdag
◆作業場所:完全テレワーク
(ただし、初回端末受領等ピンポイントで赤坂への出社あり)
◆期間:3月~
◆単価:スキル見合い(~65万程度)
◆精算:140h-180h
◆募集:1名
◆面談:2回(WEB)