案件内容 |
内容:
サービスを含む多種多様なデータを収集、蓄積、提供するデータ基盤の開発をお任せします。
具体的には下記の業務をお任せします。
・データパイプラインの設計 (リアルタイム処理、バッチ処理の両方)
・データ基盤全体のアーキテクチャ設計
・リアルタイムにデータを収集するサーバーアプリケーションの開発 (GAE + Go言語で開発中)
・データを提供するサーバーアプリケーション(主にAPI)の開発 (Go言語で開発中)
・各種サービス(自社サービス及び外部サービス)データのETL (日次バッチ処理)
・分析環境と機械学習環境の構築 (例:Dockerを用いたJupyter環境の構築)
開発環境:
・インフラ:GCP(データ解析基盤)/ AWS(ユーザー向けサービス)
・分析基盤:BigQuery / Data Portal / Tableau
・監視:Stackdriver Logging / Stackdriver Monitoring / Stackdriver Trace
・データ基盤:GAE / GCS / Datastore / Pub Sub / Dataflow
・その他:GitHub / Slack / Qiita:Team
|
---|---|
必須スキル | ・データパイプラインの設計 (リアルタイム処理、バッチ処理の両方) |
ETLの案件一覧
過去に募集したエンジニア、データサイエンティスト、マーケターの案件を中心に掲載しています。
非公開案件を多数保有していますので、ご希望のイメージに近い案件をクリックして無料サポートにお申込みください。
専門コンサルタントがヒアリングを通じて最適な案件をご提案いたします。
単価や稼働日数などの条件面についてもお気軽にご相談ください。
該当件数:124件
ETLの案件を探す
案件内容 |
■業務内容:
<Ed Tech サービス開発部⾨にて、データ基盤の構築と運⽤を⾏うデータエンジニアのポジション>
これまでの教育事業で培ったノウハウを活かし、Ed -Tech 領域に⼤きく舵を切っており、
その実現のためにデジタル部⾨を創設してエンジニア組織を構築し、内製のEd-Tech プロダクト開発を⾏っています。
具体的には、ビジネス動画のサブスクリプションサービスや学習管理を⽬的としたラーニングプラットフォームなどを開発しています。
また、これらのサービスを含めた多種多様な学習データを蓄積するデータ基盤の構築も⾏っており、学習データの活⽤も⽬指しています。
そこで、このデータ基盤の開発を担当して頂くデータエンジニアを募集します。
教育データ活⽤をミッションとするデータチームにて、データ基盤の構築をお任せします。
また、社内の分析基盤として利⽤しているBig Query の運⽤と改善もお任せします。
具体的には下記2 つの業務をお任せします。
1.データ基盤の構築と運⽤
・データを収集するサーバーアプリケーションの開発 (Go ⾔語で開発中)
・収集したデータを提供するサーバーアプリケーションの開発 (Go ⾔語で開発中)
・各種サービスデータ(⾃社サービス及び外部サービス)のETL
2.分析基盤(Big Query)の運⽤と改善
・分析効率化のための分析基盤の改善 (例:Docker を⽤いたJupyter 環境の構築)
・各種サービスデータ(⾃社サービス)のETL
・データパイプラインの整備と安定性の強化
・インフラ:GCP(データ解析基盤)/ AWS(ユーザー向けサービス)
・分析基盤:BigQuery / Data Portal / Tableau
・監視:Stackdriver Logging / Stackdriver Monitoring / Stackdriver Trace
・データ基盤:GAE / GCS / Datastore / Pub Sub / Dataflow
・その他:GitHub / Slack / Qiita:Team |
---|---|
必須スキル | ・DWH, ETL の設計能⼒ |
案件内容 | SQLを使ったデータベースのデータマートの実装や、BIツール(Tableau)、 ETLツール(Alteryx)を使ったデータ集計作業や可視化などをお手伝いいただける方(経理の知識があれば、尚可) コンサル経験を生かした要件定義などの上流というよりは、SQLを駆使してデータマートなどを構築していただける方を希望しております。 TableauやAlteryxを使った経験がなくても、SQLが書ければ可。 自分から提案などしてデータによって事業改善を促進できる方を求めています! |
---|---|
必須スキル | SQL経験 |
案件内容 | ・お客様:大手製造業様 ・案件:お客様と一緒に新サービスをアジャイルで開発しています。 既存の顧客データ、個人データ等を解析しながら、要件を確定していき、 POC⇒本サービスへと導きます。 上記において、データクレンジング業務をご担当頂きます。 |
---|---|
必須スキル | データクレンジング,ETLの経験。(SQL,VBA) |
- 〜¥1,000,000 /月
- データアナリスト
案件内容 | ECサイトの顧客情報データの抽出、モデリング、結果からの考察を行うデータアナリスト業務 |
---|---|
必須スキル | ・Python若しくは、Rでのモデル構築の経験 |
案件内容 | ・データ集計 ・データ可視化 ・分析モデル検討・構築 |
---|---|
必須スキル | ・SQL(DBはRedshift) ・BIツール(Tableau) ・ETLツール ・統計分析(顧客/POS購買分析がメイン) |
案件内容 | ・スマホアプリやデバイスなどの操作ログを収集/解析するためのシステム構築 ・ログデータのETL処理分析の為の集計処理 ・集計結果を可視化する為のBIレポート作成作業 ※上記のいずれかをご担当いただいきます。 |
---|---|
必須スキル | ・Linux経験 ・データベース関連業務でSQL、データ設計ができる ・Java、C、Python、Rubyなどいずれかでの開発経験3年以上 ・アジャイル開発/DevSecOpsに抵抗が無い方 |
案件内容 | ・大規模データ解析アプリケーションの追加開発案件 (データ解析バッチアプリケーションの開発、及び管理用Webダッシュボードの開発) |
---|---|
必須スキル | ・大規模データのETL処理または分析基盤の構築経験 ・AWSの使用経験 ・Script言語でのWebアプリケーション開発経験 |
- 〜¥900,000 /月
- データサイエンティスト
- 東京都
- 金融
案件内容 | 某大手金融事業社内でのビックデータ案件になります。 現在稼働しているHadoop環境の運用、保守に加え、 7月から新規機能の開発などがスタートするため、 人員の増員を計画しております。 データ分析は別チームが存在しますので、あくまで分析を行うための 環境構築を行って頂くポジションとなりますが、現場の状況、 また適正次第では分析業務にも関わっていただく可能性がございます。 ・PySparkでHadoopクラスタ上のデータを分析するアプリの開発 ・Hadoopクラスタにデータを取込(いわゆるETL)アプリ・スクリプトの保守 |
---|---|
必須スキル | ※以下全てを満たしている必要はありません 1. Pythonで開発経験豊富な方 -要件定義、設計経験があると尚可 2. Java or Scalaで開発経験豊富な方 -要件定義、設計経験があると尚可 -マルチスレッドプログラミング経験があると尚可 -高パフォーマンスを要する案件での開発経験があると尚可 3. シェルスクリプトが書ける方 4. Hadoop運用作業経験があると尚可 5. Spark開発経験があると尚可 6. Perlスクリプトが書けると尚可 |
案件内容 | 【業務内容】 BIツールの改修プロジェクトにおける、メンバ、リーダークラスをそれぞれ募集しております。 各ロールに分かれて作業を担当頂きます。 |
---|---|
必須スキル | 【必要スキル】 1)メンバークラス ・Javaでのシステム開発(Min3年程度希望) ・BIツール開発または改修の経験 ・BIツール導入の経験(Business Objectsであれば尚可) ・ETLまたはDHWとシステムとの結合/データ抽出の経験 ・保険案件での参画経験または保険業務の知見 (2)リーダークラス ・ETL/DHWとシステムとの結合/データ抽出の経験 ・BIツール開発または改修の経験 ・Javaでのシステム開発(Min2年程度希望) ・チームリーダーまたはPMOの経験 ・BIツール導入の経験(Business Objectsであれば尚可) ・保険案件での参画経験 |
検索結果124件中111-120件