データエンジニアの案件一覧

■担当業務
　・すでに稼働中システムの機能追加、機能改修のビジネス要件定義（プロセスの整
理を含む）、要件定義書作成
　・ユーザーストーリー／Technical Requirementの作成
　・開発チームとの情報共有
　・ステークホルダーコミュニケーションのサポート
　・SQLを用いたデータValidationの実施
　・SIT・UATのサポート、レビュー

・DWH層テーブルの設計
・DWH層テーブルのSQLおよびPySparkを用いた実装
・DWH層テーブルについての問い合わせ対応・不具合調査
・DWH層開発環境の設計・開発・保守・運用

Webシステムより連携されるデータに対し、MotionBoardを利用して、一覧表、グラフ表示を行います。
Dr.Sumはオンプレ環境です。

■スキル要件:
SE要件

１．MotionBoard設定
２．ドキュメント（設計書、テスト仕様書、手順書）作成スキル

データエンジニア・コンサルタント募集
某エネルギー会社における全社DXを目的としたBI基盤更改案件
Azure databricks を使った、データエンジニア業務

作業内容：
・Databricksとして最適なデータの持ち方の定義、それに基づくデータを整理/分析/整形業務

■背景
・クライアント内の提案活動に於いて自然言語案件が増え始めており、リソースが必要となった
・クライアント内で自社分析ツール(テキスト分析)あり
■クライアント支援範囲
・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識
■エンドクライアント
・建築・製造・医療など
■想定業務
・データ基盤を構築するプロジェクト。蓄積したデータをBIやAIで活用するためのプラットフォームの設計・構築が主業務となります。要求開発フェーズからご参画いただくことを想定。
・顧客案件におけるデータ基盤構築支援（要件定義・設計・構築・テスト・マニュアル作成など）
・要件定義 /基本設計/詳細設計

【募集背景】
社内のデータパイプラインの設計・開発や運用フローの構築などに関連する業務を行うData Engineeringチームにおいて
主にデータのクレンジング業務を行っていただきます。
チームの所属に関わらず、データのライフサイクル全体に関わることができます。

【業務内容】
・データの戦略、活用方法、データによる競争優位性の設計
・Dataflow, GCS, BigQuery等を利用した、データパイプラインの設計・開発と運用フローの構築
・アプリやIoTからのログ収集やその設計
・BIツールやデータ出力機能などの開発・運用
・データガバナンスのポリシー設計、実装

大手海運会社で進めているDX推進プロジェクトの一環であるBIツール：PowerBIのレポート開発、運用保守をご担当いただきます。

【業務概要】
エンドユーザーやシステム担当者、当部署のBI担当メンバー等と協力し、要件定義からレポート提供までの工程を実施。

【業務詳細】
・要件定義、設計、開発、テスト、リリース作業（ユーザーとコミュニケーションをとりながら、ユーザーに必要な要件を確定）
・既存レポートのリファクタリングなど（データ調査、修正など）
・開発/保守にかかわるドキュメント作成
・エンドユーザーやシステム担当者とのコミュニケーション（情報共有、調整作業等）
※チームで動きますので、お互いで足りないスキルや経験を補いながら進めていきます。

・データ種の追加やアプリケーション追加によるデータ処理(Go言語・コンテナアプリケーション)の追加
・既存データ基盤(オンプレ、Kubernetes環境)の改修・検証・テスト
・各種ミドルウェア(CI/CD、監視、DB)の導入・検証・テスト
・データ基盤の量産
・顧客との打ち合わせ

Power BIを使ったダッシュボード・レポート作成

全グループ会社でDomo導入を進めており、現在VBAマクロで出力している帳票を
BI化してDomoへ移植しています。Domoでのデータ加工に加え、Domo利用における
ユーザ向けの運用フロー作成や問い合わせ対応および業務の適正化など
導入における課題解決やレビューなどもご対応いただきたいと考えています。
※Domo：https://www.domo.com/jp