分析基盤エンジニアの案件一覧

データエンジニア・コンサルタント募集
某エネルギー会社における全社DXを目的としたBI基盤更改案件
Azure databricks を使った、データエンジニア業務

作業内容：
・Databricksとして最適なデータの持ち方の定義、それに基づくデータを整理/分析/整形業務

■背景
・クライアント内の提案活動に於いて自然言語案件が増え始めており、リソースが必要となった
・クライアント内で自社分析ツール(テキスト分析)あり
■クライアント支援範囲
・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識
■エンドクライアント
・建築・製造・医療など
■想定業務
・データ基盤を構築するプロジェクト。蓄積したデータをBIやAIで活用するためのプラットフォームの設計・構築が主業務となります。要求開発フェーズからご参画いただくことを想定。
・顧客案件におけるデータ基盤構築支援（要件定義・設計・構築・テスト・マニュアル作成など）
・要件定義 /基本設計/詳細設計

・データ種の追加やアプリケーション追加によるデータ処理(Go言語・コンテナアプリケーション)の追加
・既存データ基盤(オンプレ、Kubernetes環境)の改修・検証・テスト
・各種ミドルウェア(CI/CD、監視、DB)の導入・検証・テスト
・データ基盤の量産
・顧客との打ち合わせ

　グローバルでエンタメビジネスを展開するクライアントのシステム刷新プロジェクトとなります。
　プロジェクト自体はECサイトやチケット販売、来訪者向けサービス、モバイルアプリなど幅広いシステムが対象となっております。
　今回募集するポジションはMicrosoft Azure Blob Storageやその他データエンジニアリングツールを用いたデータ基盤構築やデータ移行に関するポジションとなります。
　対象となる領域は、Webチケットストアとチケット発券に関するシステムとなります。
■作業内容：
　・データ基盤構築やデータ移行方針の検討
　・スクリプトやETLツールを活用したデータ変換や自動化
　・SQLとAPIを使用したデータインジェクション対応

グローバルでエンタメビジネスを展開するクライアントのシステム刷新プロジェクトとなります。
プロジェクト自体はECサイトやチケット販売、来訪者向けサービス、モバイルアプリなど幅広いシステムが対象となっております。
今回募集するポジションはMicrosoft Azure Blob Storageやその他データエンジニアリングツールを用いたデータ基盤構築やデータ移行に関するポジションとなります。
対象となる領域は、Webチケットストアとチケット発券に関するシステムとなります。

主な業務内容
・データ基盤構築やデータ移行方針の検討
・スクリプトやETLツールを活用したデータ変換や自動化
・SQLとAPIを使用したデータインジェクション対応

大手製薬業における、MRの業務改善をSnowflakeの新しいプレビュー段階の機能を用いてどう行っていけるのかを評価検証していくイメージ。
PoCをクイックに回す必要があるため、WBSに則って実直に進めるタイプというよりは、プロパの担当者の方ともコミュニケーションをこまめに取りつつ実現性を上手く探りつつ進められるような方を求めております。

・Snowflakeの構築経験

・データ利活用のトライアル実装
・既存のシステムデータや、業務で利用されているExcelデータをLakeに取り込み、ETLを実装してDWH、DMを構築する。
・分析要件に基づきBIツール上にダッシュボードを実装する。
・データの授受に際し、システム間連携機能を実装

主に医療、製薬系のサービスを複数展開されているメガベンチャー企業にて、電子カルテのデータプラットフォームを現在開発しております。
データ量は数億レコード(要領だと数百GB～TB)あり、そのデータの集計、加工、分析などデータ利活用や、データパイプラインの構築をご担当いただきます。

データプラットフォームの活用事例としては、コロナ治療薬の使用率などを患者数と照らし合わせながらの集計などがあります。

受入体制や成長環境がかなり整っておりますので、医療の知識や使用技術の知見がなくても問題ございません。

【開発環境】
・DB：BigQuery
・言語：JavaScript
・SQLパイプラインツール：dataform
・BIツール：Looker

・エンドユーザシステム部門の一員として、CRM分析基盤
　システムの追加開発案件の設計～リリースを実施して頂きます
・メインはバッチ開発でIFの追加/変更およびマート作成です。
・改修頻度は少ないですがWEB機能の開発もあります。
【担当業務】
・PMの配下でバッチシステムの追加開発の要件定義～
　リリースの実行。
・設計/製造/テストレビュー、外部結合テスト以降の
　テスト計画策定、リリース計画の策定等の推進。
・外部結合テスト以降の工程に関しては、関連システム
　との調整を主導して実施。
・開発の進捗管理、課題管理の実施。

ビックデータ基盤構築・運用案件になります。
現在、オンプレにて社内システムのログをElasticsearch/Hadoopに集約し、
各組織にレポート等の可視化機能を提供している基盤を運用しております。
今回追加データの可視化の要件がありますので、
データパイプライン構築と可視化に伴う設計・構築を中心にご支援いただける人を探しています。