データエンジニア ・ 正社員
【キャリア採用】データエンジニア(Databricksメイン)
募集背景
弊社では、企業が抱えるデータ利活用の課題に対し、データサイエンティストとエンジニアが連携しながら、Databricksを中心としたモダンデータ基盤の構築支援を行っています。
近年、クライアント企業ではデータ量の増加や分析ニーズの高度化に伴い、Delta Lakeを活用したデータ品質向上、ETL/ELT処理の自動化、機械学習基盤の強化など、Databricksを活かしたプロジェクト需要が急速に拡大しています。
こうした背景から、弊社ではDatabricksを主軸としてデータ基盤開発に携わるデータエンジニアを増員募集しています。データエンジニアは、データ収集・加工の自動化、データレイク/データマートの構築、ワークフロー最適化などを担当し、データ分析や機械学習を支える重要な役割を担います。
仕事内容
Databricksを中心としたモダンデータ基盤の構築・運用を担当いただきます。特にDelta Lake・PySpark・Workflow・Unity Catalogを用いたデータエンジニアリング業務がメインとなります。
以下のできるところからお任せします。
- Databricksを活用したデータパイプライン(ETL/ELT)の設計・開発
- PySpark / SQL / Notebooks / Workflowsを用いた処理実装・最適化
- Delta Lakeを用いたデータレイクおよびデータマートの設計・構築
- Unity Catalogを活用したメタデータ管理およびデータガバナンス体制の整備
- Databricks上でのジョブ管理およびワークフロー運用の自動化
- クラウド(AWS / GCP / Azure)と連携したデータ基盤の設計・構築
- データ収集・加工・蓄積に関する要件定義(業務理解、データ調査、課題整理)
- データサイエンティストとの協働による分析基盤・モデル運用の高度化
- データ品質向上に向けたパイプライン改善およびパフォーマンスチューニング
案件実績
プライム上場企業様が中心となります。
- 人材派遣企業様向けAIマッチングシステムの構築・運用支援
- 医療系IT企業様向けコールセンター業務のAIチャットシステムの構築支援
- 製造業様向けDatabricks活用のテクニカルアドバイザー支援(動画データ取込など)
- DXコンサルティング企業様向けRAG構築における非構造データの取り込み検証
- 製造業様向け基幹システムのデータ利活用Databricks AI/BI構築支援
- 小売業様向け統合データ分析基盤としてのDatabricks導入支援
将来的なキャリアパスについて
本ポジションでは、まずDatabricksを活用したデータエンジニアリングを中心に取り組んでいただきますが、プロジェクトを通じて得られる知見をもとに、データ基盤アーキテクト・AI/MLエンジニア・RAG・LLM開発エンジニア・テックリード/コンサルタントなど、より上流の役割へキャリアを広げていくことも可能です。データ分析からAI活用まで一貫した支援を行う当社ならではの成長機会をご用意しています。
応募要件(必須)
- データ分析基盤またはデータパイプラインの構築・運用経験(目安2年〜)
- Pythonの使用経験(Python等を使ったデータ処理または分析経験)
- クラウドサービス(AWS、GCP、Azure等)の利用経験
- データベース(Oracle、MySQL、PostgreSQL等)の使用経験(SQLを用いたデータ抽出・加工の実務経験)
- コミュニケーション能力、チームワーク
経験が少し不足している場合でも、オンライン教育や書籍などでスキルアップを支援します。面接時にご質問ください。
応募要件(歓迎)
- Databricksの利用経験(Notebook/SQL Warehouse/Unity Catalog/DLT等)
- Data Lakehouseアーキテクチャの知識または構築経験
- ETL/ELTパイプラインの設計経験
- 大規模データの前処理・品質管理に関する知識
- データガバナンス、セキュリティ、IAM設計の経験
- Databricksの資格保持(現在お持ちでなくても取得する意欲のある方は入社後に資格取得支援いたします)
- PM・リーダー経験
求める人物像
- 最新のデータ・AI技術に興味を持ち、自らキャッチアップできる方
- 業務課題を理解し、データ活用を通じて改善案を提案できる方
- 新しい取り組みに前向きで、ステークホルダーと協力しながら成果を出せる方
選考フロー
- 1 書類選考(履歴書・職務経歴書)
- 2 一次面接(オンライン/適性検査)
- 3 二次面接(オンライン)
- 4 最終面接(対面/社長・役員・採用責任者)
- 5 内定(内定後オファー面談・WEB面談を実施)
よくある質問
FAQを準備中です。