DWHの案件一覧

データエンジニアとして、データサイエンティストやエンジニアと協力しながら、データ基盤を構築・改善し課題解決を行っていただきます。
データ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用周りを幅広くご支援いただきます。

エネルギー会社のデータ活用推進（データ活用テーマの立ち上げ、PoC支援など）

【背景】
データ活用がマーケティング用途だけでなく業務用途で使うことが多くなってきたため、開発人材が不足している。

【業務内容】
・オンライン処理、パッチ処理
・ベンダーコントロール
・ステークホルダー調整

・ETLジョブなどの処理方式や単純なパッチ処理だけでなく、DWHなどの実案件としても支援ができる方
・AWSの使用経験(データクレンジングなどで使用）
・能動的に動ける人
・SnowFlakeの知見
・大枠を決められたうえで、どうやっていくかは自分で考えられる人。

販売実績データ及び顧客の行動分析データについて、億単位の大量データをtableauダッシュボードにて可視化
１．DWH(Redshift)に蓄積されたデータから、対象となるデータをマート化する　
２．BIツール（tableau）を使用し、どのような見せ方でダッシュボードを構築するか、仕様の検討から設計、構築までを行う

DWHやdatalake、AIツール・BIツールなどを兼ね備えた次世代データ基盤及び分析基盤の構築業務をご担当頂きます。
※既存のデータ基盤はAmazon Auroraベースの為、新たに構築する必要があります。

【主な業務内容】
・データ基盤のグランドデザイン
・DWH及びdatalake等の開発企画及び設計・開発業務
・グループ内企業データ連携の設計・開発業務
・AIツール、BIツール、MAツール等で使用するデータの設計・開発業務
・PoCの実施

金融機関様向けにDatabricksを新規構築、ETL処理を開発する。

■業務内容：Databricksを利用したETL処理の開発

大手航空会社のシステム子会社にて旅客データや運航データの活用推進のPMOとして支援いただきます。
DWHの構築やBIツール開発を行っており、以下業務を担当いただきます。
・進捗管理／課題管理
・ベンダーマネジメント
・データ活用推進支援（対ユーザー部門）
ユーザー部門やステークホルダーとの折衝が発生するため、柔軟なコミュニケーションを取れる方がマッチするポジションです。

クライアントが保有するビッグデータの利活用を進めていくにあたりAWSでのデータの加工、修正をお願いいたします。

■工程：要件定義～

■案件概要：
・オンプレのOracle ExadataからSnowflakeへDWHを移行
・DWH移行に伴いETL（Datastage）ジョブ他を改修（一部は新規開発、廃止も含む）
・DWH移行に伴い関連システムとのとのインターフェース連携方式変更、その他データフロー変更
・データソース一元化のため、連携ファイル格納先としてS3を新規導入
■規模感
・移行対象テーブル数：約1500本
・移行ETLジョブ数：約1000本
・インターフェース数：約1000本

上位クライアントである大手印刷会社のデータ分析業務を担っている部署でのデータエンジニアのお仕事です。
現在、上位会社は大手流通会社のデータ分析業務を請け負っており、業務が増加傾向のため新たにデータ分析エンジニアを募集しております。

【具体的には…】
エンドクライアントである大手流通会社に常駐いただきます。
広告効果測定データを主に取り扱い、SQLを活用してDWHからのデータ抽出/成形業務/データ分析業務をお任せいたします。
先方セキュリティルーム内(ネット環境も制限)での業務となるため、スクラッチでのクエリ記述をお願いいたします。

【就業について】
・エンドクライアント先(四ツ谷駅)に週3日出勤
・週3日稼働も相談可
・週5日稼働を希望される場合は、残りの週2日は上位先(飯田橋)に出勤