データエンジニア / データ品質管理・パイプライン開発

株式会社ミスミグループ

企業ページへ

年収

650万円〜850万円

勤務地

東京都

職種

データエンジニア

リモートワーク
フレックス出勤・時差出勤
モダンな技術を採用
技術試験なし

求人情報

仕事内容

仕事内容
①担当業務内容 AI検索サービス向けデータ基盤において、データの品質保証(Data Quality)、およびETLパイプラインの実装・運用を担当します。 1.データ品質管理(Data Quality)の実装と監視:40% AIモデルが常に「正しいデータ」を利用できるよう、データの品質を監視・維持する仕組みを実装します。 ・データテストの実装: Dataformやdbt等を用い、データの欠損・重複・異常値を検知するテストコード(Assertion)の作成と実装。 ・モニタリング環境の整備: データの鮮度や品質低下を検知した際、即座にSlack等へ通知し、原因を特定できるダッシュボードや監視フローの構築。 ・データリネージの管理: データの発生源から利用箇所までの流れ(リネージ)を整理し、メタデータ管理ツールへの登録・更新を行い、トレーサビリティを確保する。 2.データパイプライン(ETL/ELT)の開発・改善:40% 設計されたアーキテクチャに基づき、実際のデータ処理フローを開発します。 ・ETL処理の実装: PythonやSQLを用いて、ログデータや商品データを収集・加工する処理のコーディング。 ・ワークフローの移行・自動化: 手動で行われている既存のデータ処理を、Workflow Engine(Airflow/Vertex AI Pipelines)上での自動実行ジョブへと書き換える。 ・パフォーマンスチューニング: クエリの最適化を行い、データ処理時間の短縮やコスト削減(BigQueryのコスト管理等)を行う。 3.データサイエンティストとの連携・サポート:20% ・データサイエンティストからの「こんな特徴量が欲しい」「データがおかしい」といった要望・問い合わせに対し、SQLを用いた調査やデータ抽出、マート作成を行う。 ②仕事のやりがい(面白さ) ・AIの精度向上に直結: 自身が整備・クレンジングしたデータによって、検索精度やレコメンドの質が向上する様子をダイレクトに感じられます。 ・モダンな技術スタックでの経験: GCP (BigQuery, Vertex AI) や Dataform といったモダンなデータ基盤技術を使用し、大規模データ処理(Big Data)の実務スキルを高められます。 ・「データ品質」という専門性: 昨今注目されている「データ信頼性(Data Reliability)」や「データオブザーバビリティ」の領域で経験を積むことができます。 ③3~5年後の想定されるキャリアパス データ品質とETL開発のプロフェッショナルである「シニアデータエンジニア」 データ基盤全体の設計を担う「データアーキテクト」 機械学習の運用基盤構築へ幅を広げ「MLOpsエンジニア」 ④業務上の課題 データの種類や量が増えるにつれ、「データの欠損」や「予期せぬフォーマット変更」によるエラーが散発しています。現在は手動での調査や修正対応に追われることも多く、システム的な自動検知(テスト)の網羅率を上げ、運用の安定化を図ることが急務です。 ⑤使用ツール ・クラウド・インフラ : Google Cloud Platform (GCP) 主体 ・データウェアハウス・加工 : BigQuery, Dataform, Redshift ・ワークフロー・ML : Vertex AI, Airflow ・言語 : SQL, Python ・IaC・CI/CD : Terraform, GitHub Actions ・コミュニケーション : MS Teams, GitHub Issues ⑥その他 リモートワークと出社のハイブリッド勤務、フリーアドレス制など、柔軟で働きやすい環境です。
仕事内容の変更範囲
会社の定める業務

必須条件

必須条件
いずれもの条件を満たす方 ・SQLを用いたデータ抽出・集計・加工作業の実務経験(目安:1年以上 / 複雑なJOINやウィンドウ関数が書けるレベル) ・Python等のスクリプト言語を用いた開発経験 ・何らかのDB(RDBまたはDWH)におけるテーブル設計やデータ管理の基礎知識 ・データの不整合やエラーに対し、根気強く原因を調査し解決した経験
求める人物像
・「正確さ」に拘れる方: 1つのデータミスがAIの挙動を変えてしまうことを理解し、細部まで確認を怠らない方 ・改善マインドを持つ方: 同じエラーや手作業が繰り返されることを嫌い、「次はどう自動化するか」「どう検知するか」を主体的に考えられる方 ・コミュニケーション力: データサイエンティストやリーダーと連携し、仕様の確認やアラート報告をスムーズに行える方

歓迎要件

<経験> ・GCP (BigQuery) または AWS (Redshift, Athena) でのデータ処理経験 ・Dataform, dbt 等のELTツールを用いたデータモデリング・テスト実装経験 ・Airflow 等のワークフローエンジンを用いたジョブ管理の経験 ・Git / GitHub を用いたチーム開発経験 <知識・スキル> ・データ品質(Data Quality)に関する関心・知識 ・Webサービスのログ設計やデータ収集に関する知識

想定年収

想定年収
650万円〜850万円
賞与・昇給
賞与:2回(6月、12月)

おすすめポイント

★東証一部上場の事業革新 30〜40年前、金型製造用の部品調達は大変な手間とコストがかかるものでした。国内に散在する小規模部品メーカーからの部品発注には、長い納期と多大な人件費が必要で、精密機械工業部品の調達構造は非効率的で高コストでした。同社は、これらの課題を解決するため、全国の小規模部品メーカーとの協力関係を築き、部品を標準化し、カタログ販売を開始しました。これにより、部品1つでも最短1日で出荷する「短納期一個流し」を実現しました。 ★社内研修制度 社内戦略研修: 経営陣が実践に基づく戦略理論を提供する研修です。 自己啓発支援制度: ビジネス能力やスキルを向上させるための社外研修を受講した場合、受講費用の一部を会社が自己啓発支援としてバックアップします。 社内英会話レッスン: 専属の英語教師が常駐し、予約を取ることでいつでも英語の講義を受けることができます。

ポジション

職種
・データエンジニア

配属先

部署の特徴・業務環境
募集組織 デジタルサービスモデル開発・ハブ AI検索開発室 AI検索開発チーム ベクトル検索G展開セクション <AI検索開発チームの組織構成>  全体11名(ディレクター2名、リーダー2名、メンバー7名) <チームの年齢構成>  ディレクター、リーダー:30代~40代  メンバー:30代前半が中心。20代~30代まで在籍 ①事業部/室ミッション   私たちはECサイトを運営する当社において「部品調達における顧客の 思考にかける時間 の短縮」に向けて活動しています。IA産業(Industrial Automation産業)における部品調達のデファクトスタンダードとなるためのコア機能の一つとして検索サービスを位置づけ、自社内製開発しています。 「デジタルサービスモデル開発・ハブ(TX)」の一員として、顧客・サプライヤーの「あらゆるムダの排除」によりIA産業の非効率解消に貢献していきます。 ②チームミッション チーム全体のミッションは「検索プラットフォームの進化・全体最適化」です。 現在、各国のECサイトへサービスを展開するフェーズにあり、国ごとに異なるデータ構造やインフラ事情を吸収し、かつ急増するアクセスに耐えうる「業界初のグローバル検索基盤」の構築が進んでいます。 メンバークラスの皆様には、AIモデルや検索エンジンに供給される 「データの品質」を徹底的に守り抜き、システムが常に正しいデータを学習・推論できる状態を維持・実装 していただきます。 ③自組織の強み・事業責任者からのコメント等 私たちのチームは、サービス企画からシステム実装、AI運用までを一気通貫で担っています。 どれほど優れたAIモデルも、学習するデータが汚れていれば性能を発揮できません。「Garbage In, Garbage Out(ゴミが入ればゴミが出る)」を防ぎ、AI検索の精度を根底から支えるのがあなたの役割です。 3000万点の商品データと膨大な検索ログを扱う中で、泥臭いデータの不整合と向き合い、それを技術の力で解決していく――。地味ですが、サービスの信頼性を左右する極めて重要なポジションです。

雇用形態

雇用形態
正社員
試用期間
あり(3ヶ月)

勤務形態

勤務形態
フレックスタイム制
勤務形態補足
①勤務制度区分  <フレックスタイム制> ②リモートワーク勤務  <リモート可> ③出社頻度  週3日 ④土日祝出勤  ・有無<無し> ⑤出張情報(有無/場所/頻度)  ・有無<無し> ⑥兼業に関して  ・原則不可
就業時間
9:00〜17:30
就業時間補足
9:00~17:30(標準7時間30分)
コアタイム
11:00〜15:00

残業時間

固定残業時間
月30時間

予定勤務地

予定勤務地
東京都千代田区九段南1丁目6番5号九段会館テラス (最寄駅:九段下駅(東京メトロ半蔵門線・東西線、都営新宿線)より徒歩1分)
勤務地補足
東京本社 ・リモートワーク勤務 リモート可 ・出社頻度 週3日

リモートワーク頻度

リモートワーク頻度
一部リモート

福利厚生

保険
健康保険、労災保険、厚生年金保険、雇用保険
健康・医療
提携保養施設・スポーツ施設利用制度、受動喫煙防止措置

受動喫煙防止措置

受動喫煙対策特記事項
(喫煙専用室あり)

制度

財産形成
退職金制度、企業型確定拠出年金
職場環境
リモートワーク制度、研修制度
職場環境補足
・社内研修制度 ・社内英会話レッスン(本社ビルのみ)

休日・休暇

年間休日日数
124日
休日・休暇
土日祝休み、完全週休二日制、有給休暇、年末年始休暇、慶弔休暇
休日・休暇補足
※ただし、業務の都合で休日を他の日に振替えることがある ・特別休暇
育児・介護
育児休暇、育児支援制度

諸手当

諸手当
残業手当、通勤手当

その他

その他補足
・テーマパークチケット優待

選考情報

選考内容

選考情報
書類選考,面接

株式会社ミスミグループの募集中の求人

Border

株式会社ミスミグループ

フルスタックエンジニア/EC検索(リーダー/サーバーサイド)#検索を通じたAIサービスの展開推進 #非管理職 #専門職ポジション

■必須条件

いずれもを満たす方 ・Webアプリケーションのサーバーサイド開発経験(Go, Python, Java等 / 目安:5年以上) ・クラウド(GCPまたはAWS)を用いたコンテナベースのアプリケーション設計・構築経験 ・RDBおよびNoSQL(Elasticsearch等)のスキーマ設計・チューニング経験 ・開発チームのリーダーまたはテックリード経験(コードレビュー、設計判断、メンバー指導)

700万円〜1,000万円

サーバーサイドエンジニア

株式会社ミスミグループ

SRE・インフラテックリード / EC検索(自社開発のベクトル検索エンジン) #攻めの運用と仕組み化

■必須条件

* AWSやGCPなどのパブリッククラウドにおけるインフラ設計・構築・運用の実務経験 * コンテナ技術(Docker / Kubernetes / Cloud Run等)を用いた本番環境の運用経験 * Terraform や CloudFormation 等を用いたIaC(Infrastructure as Code)の実践経験 * Python等のスクリプト言語を用いた運用ツール作成や自動化の経験

700万円〜1,000万円

インフラエンジニア, クラウドエンジニア

株式会社ミスミグループ

AIエンジニア/meviy(セクションリーダー/機械加工品の自動見積りサービス)【クラウド × AIエージェント × 実装主導】#形状認識#見積自働化#3D CAD連携 #管理職ポジジョン

■必須条件

以下、いずれもの経験・知識を有すること <経験> 5年以上のサービスの設計・構築・運用のご経験 <知識> ・機械学習、コンピューターサイエンスもしくは数学の専門知識 ・データの探索、特徴量の変換、モデルの導出、システムの実装、パフォーマンス評価の一通りの行程への理解 ・プロジェクトマネジメント、要件の整理から実装への落とし込みの知見

800万円〜1,000万円

AI・機械学習エンジニア

こんな募集もおすすめ

Border

株式会社ベイカレント・テクノロジー

【データエンジニア】平均年収1,100万円超/平均残業時間22hで給与とワークライフバランスを両立できる環境/ワンプール制による多様な業界への案件アサインが可能です

■必須条件

・システムエンジニア/データエンジニアとしての実務経験4年目以上 ・社会人経験4年目年以上 ・大学卒以上または高専卒

600万円〜2,000万円

プロジェクトマネージャー(PM), プロジェクトリーダー(PL), ITコンサルタント, データエンジニア

ソフトバンク株式会社

【データエンジニア(インフラ基盤エンジニア)】国内最大級の通信事業を展開/主軸事業を基盤とした様々な新規事業/年間休日最大140日

■必須条件

・SQLを用いたデータ抽出・集計・前処理経験 ・ETL/データパイプラインの設計・開発経験 ・GCP/AWS/Azure などのいずれかを用いたシステム構築経験 ・DWH/データレイクの導入・運用経験(BigQuery、Redshift、Snowflake、Databricksなど) ・顧客要件を理解し、技術的に落とし込める設計力・ドキュメンテーション力

636万円〜1,570万円

データエンジニア

株式会社電通総研

【ビッグデータエンジニア】電通グループのシナジーが強み !/ 平均年収1100万円超!/プライムベンダーとして価値提供が可能/平均残業時間28時間

■必須条件

●下記いずれかの経験、スキルを有する方 ・データモデリング、ETL処理、DWH構築、BI構築に関連するシステム構築案件において、要件定義、設計の経験(1年以上) ・Azure、AWS、GCPを用いたシステム構築経験(1年以上)

570万円〜1,170万円

データエンジニア

株式会社日本経済新聞社

■データエンジニア

■必須条件

以下のうち2つ程度 ・Go, Python 等の何らかのプログラミング言語を利用した開発経験 ・AWSまたはGoogle Cloud 環境での開発経験 ・Redshift, BigQuery, PostgreSQL, MySQLなど、データベースおよびデータウェアハウス関連の運用経験 *データサイエンティストやアナリスト、Webエンジニア、SRE出身で「データ領域に挑戦したい」というキャッチアップ意欲のある方も歓迎します。

650万円〜1,000万円

データエンジニア

株式会社クリエーション・ビュー

<9割以上がリモート(年に数回程度の出社メンバーも)>データエンジニア 平均残業時間は12.5時間程度/プライム案件多数/1次請け8割以上(*)で業務調整もしやすい◎

■必須条件

いずれか1つでも当てはまればご応募ください ・データエンジニアとして経験のある方 ・開発エンジニアとしてSQLやPythonの利用経験がある方 ・tableauやBIツールの利用経験がある方 ※いずれも年数不問

450万円〜750万円

データエンジニア

パーソルクロステクノロジー株式会社

【データエンジニア】パーソルグループSI部門/プライム案件100%/企画から下流までの一貫したPJ/リモート比率高

■必須条件

以下のご経験を概ね満たす方​ ・データ基盤(DWH)構築経験(3年以上)​ ・プログラミング言語を用いた開発(Python/SQL等)(3年以上)​ ・ETLの設計・開発・運用経験(2年以上)​ ・AWS/Azure/GCP等クラウド経験(2年以上)​

550万円〜980万円

データエンジニア

株式会社みんなの銀行

【データエンジニア】金融の未来を創る事業モデル/国内No.1銀行の基幹システムに採用/世界初・フルクラウドのBaaS基盤で、あらゆるサービスに銀行機能を組込む!

■必須条件

【必須】 ■本プロジェクト(Misson/Vision/Value)への共感 【推奨】 ■データ分析基盤の開発経験 ■GoogleCloudPlatformでの開発経験 ■データ利活用プロジェクトのマネジメント経験 【必要実務経験年数目安】 20代は2年以上 30代は5年以上

420万円〜900万円

データエンジニア

株式会社電通デジタル

【データエンジニア】リモートワーク可/フレックスタイム制導入/電通グループ中核会社

■必須条件

必須スキル・経験(いずれも2年以上の業務経験が望ましい) ・SQL、Pythonによるデータ処理・開発経験、Linuxコマンド操作スキル ・ETL/ELTに関わるパイプライン設計・実装経験 ・Airflow等のETLオーケストレーションツールやデータパイプラインツールの利用 ・データウェアハウス構築・運用・保守経験(BigQuery、Redshift、Snowflake等) ・データマート構築・運用・保守経験(BigQuery、Redshift、Snowflake等) ・社外パートナーや社内関係者と協働できるコミュニケーションスキル ・クラウドサービスの活用経験(下記いずれか) GCP(BigQuery, Cloud Storage, Dataflow, Pub/Sub, Cloud Composer 等) AWS(Redshift, S3, Glue, Athena, Lambda, EC2 等) その他主要クラウド(Azure Synapse Analytics等)

500万円〜1,000万円

データエンジニア

パーソルクロステクノロジー株式会社

【プライム外販部門のデータ連携基盤・業務プロセス自動化SE】パーソルグループSI部門/プライム案件100%/企画から下流までの一貫したPJ/リモート比率高

■必須条件

1.技術 ・システム開発プロジェクトにおける実務経験4年以上(要件定義~設計・開発・テストいずれかの工程を含む) ・データ連携、バッチ処理、または業務自動化領域(ETL/RPA/ノーコード/ローコード)での開発経験1年以上 ※ASTERIAWarp、PowerAutomate、 UiPath、OutSystems、あるいは類似ツールの使用経験を含む ・SQLを用いたデータ操作(抽出・結合・更新など)の実務経験 2.人物像 ・顧客や社内関係者との調整・折衝、課題解決に関するコミュニケーション力 チームでの開発経験(複数人での役割分担・成果物レビューなど)

432万円〜697万円

データエンジニア, RPAエンジニア

株式会社メンバーズ

データエンジニア・生成AIエンジニア/東京

■必須条件

・アプリケーション開発で2言語以上使用経験があるまたはPythonの使用経験がある方 ・AIに興味があり、何かしらの自己学習をしている方 ・データ領域で学習を続けることができる方 ・顧客との関係構築ができる方

450万円〜500万円

データエンジニア, AI・機械学習エンジニア

株式会社NTTデータ先端技術

【AIとビッグデータ分析の基盤エンジニア】NTTデータ子会社内で売り上げ規模最大/1.5次請け/上流工程/30種類以上の研修あり/平均年収700万

■必須条件

◆オープンソース・ソフトウェアを用いたシステム基盤の構築経験(3年以上) ◆Javaなどのプログラミング言語を用いたシステム開発経験(3年以上)

500万円〜800万円

データエンジニア

パーソルクロステクノロジー株式会社

【データエンジニア】パーソルグループSI部門/プライム案件100%/企画から下流までの一貫したPJ/リモート比率高

■必須条件

・アプリケーションエンジニアまたはデータエンジニアとしての実務経験3年以上 └設計・開発・テスト・リリースまでの一連の開発工程を経験していること ・SQLを用いたデータ抽出・加工・分析の実務経験 ・AWS環境での開発・運用経験:1年以上

500万円〜697万円

データエンジニア

株式会社エーピーコミュニケーションズ

データ分析基盤エンジニア

■必須条件

・プログラム開発やスクリプト等でのツール開発のご経験、または相当するスキル ・インフラに関する設計構築のご経験、または相当するスキル

500万円〜700万円

データエンジニア

株式会社エーピーコミュニケーションズ

【データエンジニア】業務レベルの経験を積める充実した講習・研修制度/プロフェッショナルを目指したい方のキャリアも積極支援/フルリモート可

■必須条件

下記どちらも満たしていること  ・PythonやSQLを使用したコーディングのご経験  ・Microsoft AzureやAWSを使用した環境構築、運用のご経験

600万円〜1,000万円

データサイエンティスト, データエンジニア

SCSK株式会社

【製造業DX_データマネジメント・データ利活用のSE】

■必須条件

・アプリケーション開発経験2年以上

450万円〜1,200万円

データエンジニア

株式会社マクロセンド

【データエンジニア】

■必須条件

・社会人経験3年以上 ・AI/データサイエンス領域やインフラについて学ぶ習慣がある方 ・SQLの実務経験があれば尚可

400万円〜450万円

データエンジニア

freee株式会社

アソシエイトアナリティクスエンジニア(ビジネス)

■必須条件

・技術・開発経験 ・何かしらのプログラム言語の実務経験 ・gitコマンド の操作経験 ・ソフトスキル ・ビジネスや利用者の課題を理解、言語化し着実にタスクを実行出来る方 ・エンジニア部署以外のメンバーとコラボレーションした上で開発を行った

515万円〜755万円

データエンジニア

アジアクエスト株式会社

【データエンジニア(東京)】東証グロース上場/AIやマルチクラウドに強みを持つ企業/エンジニアのやりたいことを大切にする社風/残業18h以内でリモート中心のPJ

■必須条件

■大学卒以上 ■以下2つの条件を満たす方 ・エンジニア経験3年以上 ・DWH/データレイク、ETL/ELTなどを用いた設計・構築経験半年以上

420万円〜800万円

データエンジニア

株式会社エス・エム・エス

【マーケティングエンジニア/データエンジニア】コーポレートIT×業務改善×運用 / BPRやインフラ領域へ役割拡張可 / 東証プライム上場

■必須条件

以下いずれにも該当する方(目安2年以上) ・Pythonを用いた開発経験 ・SQLを用いたデータの抽出・加工経験 ・Google Cloud, AWS, Azureなどのパブリッククラウドを用いたシステム開発経験 ・マーケティング業務にかかわるシステム設計・データ設計の経験 ・生成AIを活用した業務改善経験、または開発経験

490万円〜810万円

データエンジニア

ソフトバンク株式会社

【マーケティングデータ基盤エンジニア(法人統括)】国内最大級の通信事業を展開/主軸事業を基盤とした様々な新規事業/年間休日最大140日

■必須条件

いずれも法人向けシステム開発、技術支援、プロジェクトマネジメントにおいて5年以上の実務経験を有していること ■テクニカルスキル ・CDPやデータ基盤の知識・設計/導入経験 ・IT業界(SIer、Webサービス企業など)でのモバイル/Webアプリケーション開発経験 ・ITアーキテクトとして、提案/設計/構築/テスト/運用工程におけるシステム開発の品質評価の実施経験 ・CDPやデータ基盤導入に必要なサーバ、ミドルウェア、クラウド(IaaS/PaaS)、データベースのITアーキテクチャ設計構築の経験 ■コアスキル ・お客さま/各種対外ベンダーに対するフロント対応経験(交渉能力、調整能力) ・コミュニケーション能力 ・ドキュメント作成能力(提案書・設計書・計画書・テスト仕様項目・仕様書など) ・論理的思考力 ・トラブルシューティング(技術や契約など)が可能なタフさ ・PMP相当のプロジェクトマネジメントスキル

637万円〜1,539万円

データエンジニア

株式会社Belong

【 Data Engineer】元Google/GSのCTO、Amazon協業、伊藤忠Gの自社開発/創業50倍成長、米国買収で世界展開/国籍不問の実力主義

■必須条件

・コンピュータサイエンスや情報工学の学位、またはそれに準ずる実践経験 ・日本語での会話(ビジネスレベル、JLPT N1以上) ・2年以上(シニアなら5年以上) Data Engineerの役割に関連してる開発・運用経験 ・Python, Kotlin, Scala, Java などのプログラミング言語の経験 ・DWH構築の経験やプラクティスの理解 ・DBやSQLの経験やプラクティスの理解 ・情報収集および業務効率化(ドキュメント作成など)のために、ChatGPT、Geminiまたは類似のテクノロジーを活用した経験

500万円〜1,210万円

データエンジニア

IT菩薩モロー

この求人を監修した人

毛呂 淳一朗 「IT菩薩モロー」

YouTubeでITエンジニアの転職やキャリアに関する情報を発信するキャリア系インフルエンサー。YouTubeチャンネル登録者数は3.4万人(2025年4月時点)。

エンジニア採用担当としての経験も豊富で、企業が求める人材や視点も熟知。その経験を活かし、現在はITエンジニア特化のキャリア支援企業「キッカケエージェント」を立ち上げ、月間120人のITエンジニアと面談を行う。エンジニアのキャリア志向と企業課題の解決を両立する最適な人材紹介を提供。

YouTubeX

条件が近い求人を探す

関連する職種から探す

職種×都道府県の条件から探す

関連する職種×年収から探す

関連するスキルから探す

【株式会社ミスミグループ】データエンジニアの求人・転職・中途採用情報(東京都)|キッカケエージェント