DB/基盤系の案件一覧

【作業内容・工程・環境】
データ利活用基盤に新規データマートの構築開発案件
既存の2種のデータマートを統合し、新規のデータマートを構築する。
要件資料と現行設計を元に、データ抽出の設計作業（200項目×11システム）
※最適化のため、一部の項目では現行仕様と新規要件を元に調整・検討を行う場合あり。
設計書を元にSQL製造、及び検証作業（単体～総合試験）

SQL: 一般的なSQL言語で1kstep以上のコーディング経験
SQL設計および製造が単独で可能
業務要件に基づいたデータ抽出設計（SEレベル）
データ抽出設計に基づいたSQLコーディング
PLまたはチームリーダー経験
(小規模チームのスケジュール管理・タスク管理)
テレワークでのコミュニケーション（チャットツール、音声会議）
お客様に対して提案ベースでの課題調整能力

【業務内容】
データ分析システム開発・運用作業全般をお願いします。
スクラムのメンバーとして、基盤構築/アプリ開発を実施頂きます。
・基本設計
・詳細設計
・実装
・テスト
・リリース
・運用・保守　など

【開発環境】
言語 : Python
クラウド：AWS（Lambda）
DB : SQL

・Pythonでの開発経験
・AWSと連携する機能を設計・実装・テストした経験

大手エンターテインメント企業において、
・グループ会社のデータレイクのインフラ整備とセキュリティ強化の実施
・グループ会社の事業部に関連するインフラ開発
などを担当していただきます。

※お願いする可能性のある業務スコープ例

・データレイクのクラウドインフラ基盤の開発並びに保守
・統合開発環境のCloud Workstationsの運用
・Terraffom CloudやGitHub、Slackなどの開発者向けツールのアカウント管理及びセキュリティ設定
・脆弱性検知システムの導入、運用
・システム監視の導入、運用
・システム運用マニュアル作成
・データレイクへのアクセス権限申請の対応

言語：SQL, Python
環境・ツール：
・分析基盤：BigQuery
・統合開発環境：Cloud Workstations
・統合分析環境：Jupyter, jupyter hub
・CI/CD：GitHub Actions
・ワークフローエンジン：Cloud Composer, Trocco
・監視ツール：Cloud Monitoring, datadog
・インフラ構成管理：Terraform
・コード管理：GitHub
・ツール類：Slack / Google Workspace / Notion

■案件概要
・某大手通信事業者様の生成AI基盤開発支援

■業務内容
・サイトクローラーの開発業務
・複数名での開発

・Pythonでのアプリケーション開発経験（4年以上）
・Linux/AWS上でのアプリケーション運用経験・パフォーマンスチューニング経験（3年以上）
・DB（RDBMS、NoSQL）構築・運用および、パフォーマンスチューニング経験（3年以上）
・Webアプリケーションの開発・運用経験（言語は問わない）

・分析用データベースシステム障害対応（速度改善等）
・分析用データベースの整備（クレンジング・名寄せ）
・ドキュメント管理
。分析用データベース基盤の要望対応
・追加インプットデータを格納
・追加マートを作成
・AWSのサービスを用いた簡易的なシステムの改修

・クラウド（AWS）を用いたデータベースの運用業務経験
・システム開発の上流～下流までの経験（3000ステップ程度の小さいシステムでも可）
・以下の様な資料作成経験
要件定義：要件定義書
基本設計：データ定義書、E-R図、機能一覧
詳細設計：機能設計書
・AWSサービスに関する知見や利用経験
lambda/EC2
Athena/Redsiftなどのデータベースサービス
S3
・コーディング経験
・SQL（Prestoなら尚よし）
・Python3
・上記言語の速度改善に関する知見（2分探索、データベースのインデックス）

【案件概要】データ連携基盤の構築
【作業内容】会計系データを取り込み⇒他データとマージ⇒レポート系のシステム(DWH/BIなど)へ連携
【工程/スケジュール】
2024/01-　現行調査など
2024/02-　要件定義工程

希望のスキルセット
　-データ分析基盤の全体的なアーキテクチャ検討
　-Snowflakeの設計・実装
　-Snowflake構築に関連するパブリッククラウド(AWS等)のご経験)
英語は優先度下がったので、英語できなくても可

【必　須】以下いずれかのスキル要件に2～3つ程度該当する
1)AWS（ETLとしてGlueを使用）
… 上流(アーキ検討)から対応可能な方。2に付随したAWS環境の構築。
2)Snowflake
… 上流(アーキ検討)から対応可能な方。Snowflakeは新規に構築。
3)Talend
… 設計・構築から対応可能な方。顧客内に既存のTalend環境あり、そこに追加していく
4)JP1/AJS
… 設計・構築から対応可能な方。ジョブ連携
5)英語コミュニケーション
… 親会社が海外でありコミュニケーション発生する
6)顧客調整、プロジェクトリード

・中小企業向けに金融プラットフォームサービスを展開している企業にて、SREエンジニアとして参画をしていただきます。

・具体的には既存サービスのAWSインフラ設計・構築・運用を行っていただきます。

・また、開発チームがSRE活動を円滑に進めるための基盤の整備に携わって頂きます。

・使用言語：PHP(Laravel)、Go(Echo)、JavaScript(Vue.js,Nuxt.js, Vuetify)

・DB：PostgreSQL

・インフラ：AWS（EC2、S3、ECS、Docker等）

・その他ツール：Tableau Server、JupyterLab、Github、JIRA、Slack

・AWS環境での構築・運用経験が1年以上

・Linuxのオペレーション知識

Snowflakeを利用したデータ蓄積+活用。
連携されたファイルなどのデータをSnowflakeにてデータを蓄積。
蓄積後ユーザに使いやすいように加工し活用してもらうよう設計・開発を行う。

【主なスキル技術セット】
Snowflake
Python
Javascript
AWS
Informatica Intelligent Cloud Services（IICS）

その他(ツール作成等)
Powershell
bash
Excelマクロ

・ユーザビリティを意識した設計を行った経験
・積極的にコミュニケーションが取れる
・何かしらのデータベースを用いた開発経験　(※.Oracle,Redshift等)

【案件概要】Snowflakeデータ基盤設計構築

【作業内容】Snowflakeの設計・実装

【環境】AWS Lambda、Amazon Redshift、Amazon Linux

Snowflakeの設計経験

【案件概要】コンテナを使った基盤設計、構築
【作業内容】
AWSでアーキテクチャの検討・設計
その検討したアーキや構成のプロトタイプを構築する

※アーキ検討は別のチーム

【担当工程】基本設計、詳細設計、構築、単体テストまで

【環境】
EKS
Gitlab
AWS CodePipeline/CodeBuild/CodeArtifact
AWS ECR
AWS Inspector
ubuntu

EKS（Amazon Elastic Kubernetes Service）設計構築経験
またはKubernetes（K8s）設計構築経験