募集要項
- 募集背景
- 事業拡大に伴う増員となります。
- 仕事内容
-
Databricksを中心にデータ基盤とBI環境を集約し、
全社のデータ駆動型経営を支える環境を構築・推進する業務です。
PySpark、Databricks SQL、Databricks Workflowsを用いてETL
/ELTのデータパイプラインを設計・運用し、レイクハウス上でのデータモデリングも担います。
また、既存BIからDatabricks AI/BIへの移行やダッシュボードの高度化、
クエリ性能の最適化を進めます。
さらに、Unity Catalogを活用したデータガバナンスやメタデータ管理を整備し、
データマートの利用支援や社内向けの運用ルール策定も行います。
【具体的には】
・データパイプライン(ETL/ELT)の構築・運用: PySparkやDatabricks SQL、
Databricks Workflowsを用いた効率的なデータ処理ジョブの実装
・レイクハウスでのデータモデリング: メダリオンアーキテクチャに基づいた、
Silver(クレンジング)およびGold(ビジネス用マート)レイヤーの設計・開発
・BI移管とダッシュボード高度化: 既存BIからDatabricks AI/BI(Dashboard
s)への移行推進、およびDatabricks SQLを用いたクエリパフォーマンスの最適化・チューニン
グ
・データガバナンスとメタデータ管理: Unity Catalogを活用したデータカタログの整備、
アクセス権限の適切な管理・データ活用統制・支援
- 応募資格
-
- 必須
-
・Databricksの実務経験(Delta Lake、Unity Catalog、Databricks SQLなどの利用経験)
・クラウド環境(AWS、Azure、GCPのいずれか)上でのデータ処理パイプラインの開発・運用経験
【歓迎】
以下のいずれかに該当する方:
・DWH/データレイク環境におけるデータマート(Star Schemaなど)の設計・データモデリング経験またはその理解
・dbt(data build tool)を用いたデータモデリング・CI/CD環境の構築経験
・Databricks AI/BI、または何らかのBIツールを用いたダッシュボード構築およびデータソース設計の経験
・空間データの処理経験
・他のシステム開発チームやデータサイエンスチームとのシステム連携・要件定義の経験
- 雇用形態
- 正社員
- 勤務地
- 東京都
- 年収・給与
- 550~750万円
- 待遇・福利厚生
- 通勤交通費
- 休日休暇
- 完全週休二日制(土日)、祝日、年末年始休暇、年次有給休暇(入社初日より付与)、特別有休休暇、慶弔休暇、産前産後休暇、育児休暇 ※男性取得実績あり、リフレッシュ休暇(勤続5年以上)
