データエンジニア / データ品質管理・パイプライン開発

年収

650万円〜850万円

勤務地

東京都

職種

データエンジニア

リモートワーク
フレックス出勤・時差出勤
モダンな技術を採用
技術試験なし

求人情報

仕事内容

仕事内容
①担当業務内容 AI検索サービス向けデータ基盤において、データの品質保証(Data Quality)、およびETLパイプラインの実装・運用を担当します。 1.データ品質管理(Data Quality)の実装と監視:40% AIモデルが常に「正しいデータ」を利用できるよう、データの品質を監視・維持する仕組みを実装します。 ・データテストの実装: Dataformやdbt等を用い、データの欠損・重複・異常値を検知するテストコード(Assertion)の作成と実装。 ・モニタリング環境の整備: データの鮮度や品質低下を検知した際、即座にSlack等へ通知し、原因を特定できるダッシュボードや監視フローの構築。 ・データリネージの管理: データの発生源から利用箇所までの流れ(リネージ)を整理し、メタデータ管理ツールへの登録・更新を行い、トレーサビリティを確保する。 2.データパイプライン(ETL/ELT)の開発・改善:40% 設計されたアーキテクチャに基づき、実際のデータ処理フローを開発します。 ・ETL処理の実装: PythonやSQLを用いて、ログデータや商品データを収集・加工する処理のコーディング。 ・ワークフローの移行・自動化: 手動で行われている既存のデータ処理を、Workflow Engine(Airflow/Vertex AI Pipelines)上での自動実行ジョブへと書き換える。 ・パフォーマンスチューニング: クエリの最適化を行い、データ処理時間の短縮やコスト削減(BigQueryのコスト管理等)を行う。 3.データサイエンティストとの連携・サポート:20% ・データサイエンティストからの「こんな特徴量が欲しい」「データがおかしい」といった要望・問い合わせに対し、SQLを用いた調査やデータ抽出、マート作成を行う。 ②仕事のやりがい(面白さ) ・AIの精度向上に直結: 自身が整備・クレンジングしたデータによって、検索精度やレコメンドの質が向上する様子をダイレクトに感じられます。 ・モダンな技術スタックでの経験: GCP (BigQuery, Vertex AI) や Dataform といったモダンなデータ基盤技術を使用し、大規模データ処理(Big Data)の実務スキルを高められます。 ・「データ品質」という専門性: 昨今注目されている「データ信頼性(Data Reliability)」や「データオブザーバビリティ」の領域で経験を積むことができます。 ③3~5年後の想定されるキャリアパス データ品質とETL開発のプロフェッショナルである「シニアデータエンジニア」 データ基盤全体の設計を担う「データアーキテクト」 機械学習の運用基盤構築へ幅を広げ「MLOpsエンジニア」 ④業務上の課題 データの種類や量が増えるにつれ、「データの欠損」や「予期せぬフォーマット変更」によるエラーが散発しています。現在は手動での調査や修正対応に追われることも多く、システム的な自動検知(テスト)の網羅率を上げ、運用の安定化を図ることが急務です。 ⑤使用ツール ・クラウド・インフラ : Google Cloud Platform (GCP) 主体 ・データウェアハウス・加工 : BigQuery, Dataform, Redshift ・ワークフロー・ML : Vertex AI, Airflow ・言語 : SQL, Python ・IaC・CI/CD : Terraform, GitHub Actions ・コミュニケーション : MS Teams, GitHub Issues ⑥その他 リモートワークと出社のハイブリッド勤務、フリーアドレス制など、柔軟で働きやすい環境です。
仕事内容の変更範囲
会社の定める業務

必須条件

必須条件
いずれもの条件を満たす方 ・SQLを用いたデータ抽出・集計・加工作業の実務経験(目安:1年以上 / 複雑なJOINやウィンドウ関数が書けるレベル) ・Python等のスクリプト言語を用いた開発経験 ・何らかのDB(RDBまたはDWH)におけるテーブル設計やデータ管理の基礎知識 ・データの不整合やエラーに対し、根気強く原因を調査し解決した経験
求める人物像
・「正確さ」に拘れる方: 1つのデータミスがAIの挙動を変えてしまうことを理解し、細部まで確認を怠らない方 ・改善マインドを持つ方: 同じエラーや手作業が繰り返されることを嫌い、「次はどう自動化するか」「どう検知するか」を主体的に考えられる方 ・コミュニケーション力: データサイエンティストやリーダーと連携し、仕様の確認やアラート報告をスムーズに行える方

歓迎要件

<経験> ・GCP (BigQuery) または AWS (Redshift, Athena) でのデータ処理経験 ・Dataform, dbt 等のELTツールを用いたデータモデリング・テスト実装経験 ・Airflow 等のワークフローエンジンを用いたジョブ管理の経験 ・Git / GitHub を用いたチーム開発経験 <知識・スキル> ・データ品質(Data Quality)に関する関心・知識 ・Webサービスのログ設計やデータ収集に関する知識

想定年収

想定年収
650万円〜850万円
賞与・昇給
賞与:2回(6月、12月)

おすすめポイント

★東証一部上場の事業革新 30〜40年前、金型製造用の部品調達は大変な手間とコストがかかるものでした。国内に散在する小規模部品メーカーからの部品発注には、長い納期と多大な人件費が必要で、精密機械工業部品の調達構造は非効率的で高コストでした。同社は、これらの課題を解決するため、全国の小規模部品メーカーとの協力関係を築き、部品を標準化し、カタログ販売を開始しました。これにより、部品1つでも最短1日で出荷する「短納期一個流し」を実現しました。 ★社内研修制度 社内戦略研修: 経営陣が実践に基づく戦略理論を提供する研修です。 自己啓発支援制度: ビジネス能力やスキルを向上させるための社外研修を受講した場合、受講費用の一部を会社が自己啓発支援としてバックアップします。 社内英会話レッスン: 専属の英語教師が常駐し、予約を取ることでいつでも英語の講義を受けることができます。

ポジション

職種
・データエンジニア

配属先

部署の特徴・業務環境
募集組織 デジタルサービスモデル開発・ハブ AI検索開発室 AI検索開発チーム ベクトル検索G展開セクション <AI検索開発チームの組織構成>  全体11名(ディレクター2名、リーダー2名、メンバー7名) <チームの年齢構成>  ディレクター、リーダー:30代~40代  メンバー:30代前半が中心。20代~30代まで在籍 ①事業部/室ミッション   私たちはECサイトを運営する当社において「部品調達における顧客の 思考にかける時間 の短縮」に向けて活動しています。IA産業(Industrial Automation産業)における部品調達のデファクトスタンダードとなるためのコア機能の一つとして検索サービスを位置づけ、自社内製開発しています。 「デジタルサービスモデル開発・ハブ(TX)」の一員として、顧客・サプライヤーの「あらゆるムダの排除」によりIA産業の非効率解消に貢献していきます。 ②チームミッション チーム全体のミッションは「検索プラットフォームの進化・全体最適化」です。 現在、各国のECサイトへサービスを展開するフェーズにあり、国ごとに異なるデータ構造やインフラ事情を吸収し、かつ急増するアクセスに耐えうる「業界初のグローバル検索基盤」の構築が進んでいます。 メンバークラスの皆様には、AIモデルや検索エンジンに供給される 「データの品質」を徹底的に守り抜き、システムが常に正しいデータを学習・推論できる状態を維持・実装 していただきます。 ③自組織の強み・事業責任者からのコメント等 私たちのチームは、サービス企画からシステム実装、AI運用までを一気通貫で担っています。 どれほど優れたAIモデルも、学習するデータが汚れていれば性能を発揮できません。「Garbage In, Garbage Out(ゴミが入ればゴミが出る)」を防ぎ、AI検索の精度を根底から支えるのがあなたの役割です。 3000万点の商品データと膨大な検索ログを扱う中で、泥臭いデータの不整合と向き合い、それを技術の力で解決していく――。地味ですが、サービスの信頼性を左右する極めて重要なポジションです。

雇用形態

雇用形態
正社員
試用期間
あり(3ヶ月)

勤務形態

勤務形態
フレックスタイム制
勤務形態補足
①勤務制度区分  <フレックスタイム制> ②リモートワーク勤務  <リモート可> ③出社頻度  週3日 ④土日祝出勤  ・有無<無し> ⑤出張情報(有無/場所/頻度)  ・有無<無し> ⑥兼業に関して  ・原則不可
就業時間
9:00〜17:30
就業時間補足
9:00~17:30(標準7時間30分)
コアタイム
11:00〜15:00

残業時間

固定残業時間
月30時間

予定勤務地

予定勤務地
東京都千代田区九段南1丁目6番5号九段会館テラス (最寄駅:九段下駅(東京メトロ半蔵門線・東西線、都営新宿線)より徒歩1分)
勤務地補足
東京本社 ・リモートワーク勤務 リモート可 ・出社頻度 週3日

リモートワーク頻度

リモートワーク頻度
一部リモート

福利厚生

保険
健康保険、労災保険、厚生年金保険、雇用保険
健康・医療
提携保養施設・スポーツ施設利用制度、受動喫煙防止措置

受動喫煙防止措置

受動喫煙対策特記事項
(喫煙専用室あり)

制度

財産形成
退職金制度、企業型確定拠出年金
職場環境
リモートワーク制度、研修制度
職場環境補足
・社内研修制度 ・社内英会話レッスン(本社ビルのみ)

休日・休暇

年間休日日数
124日
休日・休暇
土日祝休み、完全週休二日制、有給休暇、年末年始休暇、慶弔休暇
休日・休暇補足
※ただし、業務の都合で休日を他の日に振替えることがある ・特別休暇
育児・介護
育児休暇、育児支援制度

諸手当

諸手当
残業手当、通勤手当

その他

その他補足
・テーマパークチケット優待

選考情報

選考内容

選考情報
書類選考,面接

株式会社ミスミグループの募集中の求人

Border

株式会社ミスミグループ

AIエージェント推進/meviy(担当リーダー/機械加工品の自動見積りサービス)【クラウド × AIエージェント × 実装主導】#開発現場におけるAIエージェント活用 #非管理職 #専門職ポジション

■必須条件

以下、いずれもの経験・知識を有すること <経験> 5年以上のサービスの設計・構築・運用のご経験 <知識> ・機械学習、コンピューターサイエンスもしくは数学の専門知識 ・データの探索、特徴量の変換、モデルの導出、システムの実装、パフォーマンス評価の一通りの行程への理解 ・プロジェクトマネジメント、要件の整理から実装への落とし込みの知見

700万円〜900万円

AI・機械学習エンジニア

株式会社ミスミグループ

AIエンジニア/meviy(セクションリーダー/機械加工品の自動見積りサービス)【クラウド × AIエージェント × 実装主導】#形状認識#見積自働化#3D CAD連携 #管理職ポジジョン

■必須条件

以下、いずれもの経験・知識を有すること <経験> 5年以上のサービスの設計・構築・運用のご経験 <知識> ・機械学習、コンピューターサイエンスもしくは数学の専門知識 ・データの探索、特徴量の変換、モデルの導出、システムの実装、パフォーマンス評価の一通りの行程への理解 ・プロジェクトマネジメント、要件の整理から実装への落とし込みの知見

800万円〜1,000万円

AI・機械学習エンジニア

株式会社ミスミグループ

ECサイトプロジェクトマネージャ/自社ECの顧客エンゲージメントを高めるプロダクト開発

■必須条件

・Webサービス開発またはシステム開発の実務経験 ・プロジェクト推進や進行管理の経験

500万円〜800万円

プロジェクトマネージャー(PM)

こんな募集もおすすめ

Border

株式会社ベイカレント・テクノロジー

【データエンジニア】平均年収1,100万円超/平均残業時間22hで給与とワークライフバランスを両立できる環境/ワンプール制による多様な業界への案件アサインが可能です

■必須条件

・システムエンジニア/データエンジニアとしての実務経験4年目以上 ・社会人経験4年目年以上 ・大学卒以上または高専卒

600万円〜2,000万円

プロジェクトマネージャー(PM), プロジェクトリーダー(PL), ITコンサルタント, データエンジニア

ソフトバンク株式会社

【データエンジニア(インフラ基盤エンジニア)】国内最大級の通信事業を展開/主軸事業を基盤とした様々な新規事業/年間休日最大140日

■必須条件

・SQLを用いたデータ抽出・集計・前処理経験 ・ETL/データパイプラインの設計・開発経験 ・GCP/AWS/Azure などのいずれかを用いたシステム構築経験 ・DWH/データレイクの導入・運用経験(BigQuery、Redshift、Snowflake、Databricksなど) ・顧客要件を理解し、技術的に落とし込める設計力・ドキュメンテーション力

636万円〜1,570万円

データエンジニア

株式会社電通総研

【ビッグデータエンジニア】電通グループのシナジーが強み !/ 平均年収1100万円超!/プライムベンダーとして価値提供が可能/平均残業時間28時間

■必須条件

●下記いずれかの経験、スキルを有する方 ・データモデリング、ETL処理、DWH構築、BI構築に関連するシステム構築案件において、要件定義、設計の経験(1年以上) ・Azure、AWS、GCPを用いたシステム構築経験(1年以上)

570万円〜1,170万円

データエンジニア

IT菩薩モロー

この求人を監修した人

毛呂 淳一朗 「IT菩薩モロー」

YouTubeでITエンジニアの転職やキャリアに関する情報を発信するキャリア系インフルエンサー。YouTubeチャンネル登録者数は3.4万人(2025年4月時点)。

エンジニア採用担当としての経験も豊富で、企業が求める人材や視点も熟知。その経験を活かし、現在はITエンジニア特化のキャリア支援企業「キッカケエージェント」を立ち上げ、月間120人のITエンジニアと面談を行う。エンジニアのキャリア志向と企業課題の解決を両立する最適な人材紹介を提供。

YouTubeX

条件が近い求人を探す

関連する職種から探す

職種×都道府県の条件から探す

関連する職種×年収から探す

関連するスキルから探す

【株式会社ミスミグループ】データエンジニアの求人・転職・中途採用情報(東京都)|キッカケエージェント