BigQueryの案件一覧

データ配信のバッチ実装となります。

複数のクライアントに向けて定期的にデータを送るバッチの製造を担当となります。

窓口となる営業担当やPMとコミュニケーションを取りながら進めて頂きます。
開発言語は Kotlin （サーバサイドKotlin）、ソフトウェア全体設計はDDD(ドメイン駆動設計）＋CleanArchtectureで行っています。

既存アーキテクチャでのデータ連携実績がありサンプルとなるコードは存在しているため、ビジネスロジック部分の開発がメインとなります。

【開発環境】

・言語：Kotlin（Ktor）

・DB：Aurora PostgreSQL, AWS Athena、BigQuery

GCP構築業務

・データパイプライン設計構築

・DWH、データマート設計構築
環境：

GCP（BigQuery,Dataflow等）

GCP構築経験

概要：

エンドクライアントの分析基盤の設計、開発、運用を担当いただきます
業務内容：

・外部とのデータ連携

・データ仕様や処理のスキームについての要件擦り合わせ

・AWS S3, Google Cloud Storage, Google Drive と言った各種ストレージと BigQuery 間でのデータの転送処理を Cloud Functions と Airflow を用いて実装・管理

・IAM の発行・管理、データのアクセスコントロール

・データサイエンティストと意見交換しながら、データの取得や前処理、予測モデル・予測値生成、および抽出のバッチ化・運用

・データ処理に係るコストのモニタリング、最適化施策

・データ連携に係るプライバシーマークへの対応

フラットな組織で、自身で物事を推進する文化です。

概要：

エンド企業へGCP導入にあたってのデータエンジニアを募集しています。
業務例：

・顧客折衝、要件整理、ドキュメンテーション

・データパイプライン設計構築

・DWH、データマート設計構築
環境：

GCP（BigQuery,Dataflow等）

【案件概要 】弊社クライアント（HR系）のデータマネジメント部署にてデータマートの開発およびディレクション業務を担当いただきます。

データ分析/活用プロジェクトへ参画いただき、データエンジニアとしてデータマート開発実装をメインにご担当いただきつつ、データ要件の定義やプロジェクトの進行管理などディレクション業務も一部ご担当いただきます。
【業務内容】

・データ分析/活用プロジェクトの推進

・データマート開発における要件定義、プロジェクトの進行管理

・分析用データマートの開発

　└データマート（テーブル）設計、SQL実装、バッチ（digdag）実装・データマートの保守運用

◆概要

　持ち帰り案件のインフラメンバーとして参画いただきます。

　基本的には、チームとして複数の案件をご対応頂くことになる想定です。
◆初めに参画する可能性が高い案件

　ウェブマーケティング事業を行っている企業様向けの、ビッグデータ分析基盤の運用、保守開発案件。

　AWS上に構築しており、各種AWSリソースの構築や、データパイプライン（データ取り込み、データ加工等）のジョブの実装などを行っています。
◆開発ツール

　・Bitbucket　・Confluence　・WorkSpaces
◆確度が高くなるAWS経験

　・ECS　・Glue　・Athena　・LakeFormation　・CloudFormation　・SecretManager　・Amazon MWAA

　・クロスアカウントでのデータ受け渡し

■CDP/BIアーキテクト

企業のデータ資産価値の向上のため、戦略立案・組織設計、先端技術導入シナリオ策定の課題に対して、コンサルタント(アーキテクチャ設計)として戦略基盤支援。・Tableauの要件定義～詳細設計、構築、レポーティング（メイン業務）・データの細部が見れデータマートをパフォ考慮して設計・マイグレーション支援・同時に、CDP/MAの構築要件定義が走っており、マーケティング統合基盤の全体PRJの一貫です。
具体例：

-DWH環境： salesforce CDP, teradata, Athena のデータブレンドが必要-CDP, S3, Athena, Tableau onlineのデータソース/データマート/ダッシュボードの設計・開発※CDPを中心とした顧客360PRJは、本案件以外で今後も増加予定※国内でも初のソリューションスタック※適材適所でポジションを用意(エンドクライアントは小売業が多い)
【依頼元会社】

デジタルトランスフォーメーションを実現するために必要な、コンサルティングからマーケティングまで、ワンストップで提供している会社の業務です。エンドクライアント別で新規顧客の獲得や見込み顧客の育成なども含めたマーケティング施策をサポートしています。(MA)

※カウンターパートがEC/マーケティング/新規事業の部門と、比較的若い層が多いです。
【クライアントPJT例】

●公共交通機関でのPoC：地方都市における観光促進として、現地での行動、店舗/交通情報などロケーションマーケティングデータの可視化/分析環境構築●国内大手スポーツ小売り量販店における広告最適化：Google関連APIと顧客スコアリングモデルを活用した自動化による広告出稿最適化、ダイナミックプライシングのアルゴリズムの施策企画と実施評価
【クライアンント環境】 ★

◆技術・ソリューション例（本案件以外も含む）・Google Marketing Platform（GA360）、Google Cloud Platform、AWS、Arm Treasure Data・Salesforce Marketing Cloud（MAツール）・Tableau、R、XGBoost、etc
弊社契約実績：弊社から10名以上参画しているクライアント。-稼動のご調整も利き、安定した稼働となっております。-依頼部署は50名以上で構成されており、フリーランス・副業の方は60%程占めております。

【案件概要】弊社クライアント（HR系）のデータサイエンス部署にてデータマート開発実務を担当いただきます。データマート開発実装をメインにご担当いただきますが、要件定義にてクライアントと直接コミュニケーションを取っていただく必要があります。
【具体的な業務内容】・分析用データマート開発　┗ 要件定義、データマート（テーブル）設計、SQL実装、テスト・バッチ基盤（digdag）の実装、運用保守・データエンジニアリング業務　┗ データの収集、加工、集計・データマートの保守運用・TableauのViz作成

クライアント社内で運用している需要予測・発注数量最適化ソリューションにおけるデータパイプライン、MLパイプラインの運用、エラー発生、顧客問い合わせ時の初動調査のご担当をいただきます。複数のクライアントの運用を行っており、各パイプラインの運用、さらには、将来的にはその開発まで対応を可能な方を期待しています。

最先端タクシーサービスに蓄積されたデータを用いてデータ解析や機械学習モデルの改修を行っていただきます。
【環境】　言語＿＿＿＿：Python,SQL　ＤＢ＿＿＿＿：BigQuery　ＦW＿＿＿＿：Django　環境・ＯＳ＿：GCP (Google Cloud Platform)