募集要項
- 仕事内容
-
1日に10億レコード規模のデータを収集し、活用しているデータ基盤を支えるデータエンジニアポジションです。データ基盤とデータプロダクトの実行基盤を担当いただきます。
■データ基盤
・大規模な車両データをDataflow等を用いてBigQueryに収集
・3,500万ダウンロードのアプリケーションのDBとログのデータをBigQueryに収集
・地図を始めとした外部データをデータ基盤に収集
・データ加工バッチの開発・運用、Google Cloudの様々なサービスを用いて実現
・StreamlitやLookerなど分析ツールのホスティング
・100人規模の利用者の管理、セキュリティコントロール
■データプロダクト実行基盤
・タクシーアプリ『GO』でAIや高度なアルゴリズムを用いたデータプロダクトの実行基盤を設計・開発・運用
・データサイエンティストの開発支援
・AIモデルの学習バッチや、本番での推論サービング
・高性能かつ高可用性を担保するための設計・実装・システム運用
・24/365のオンコール体制(待機なし・システム障害時に当番順にコールがあり対応)
【開発環境】
■データ基盤
・データストア: BigQuery
・ETL: Dataflow, 独自開発(Python)
・SQLフレームワーク: Dataform
・ワークフローエンジン: Cloud Composer(Airflow) + GKE
・メタデータ管理:Dataplex
・その他ツール: Streamlit, Kepler.gl, Kubeflow
・言語: Python
■データプロダクト実行基盤
・データストア:Redis, AWS Aurora(MySQL, PostgreSQL)
・実行基盤:AWS:AKE etc
・言語: Go, Python
・モニタリング: Grafana, Sentry
・その他ツール:Feast
■開発環境
・LLM: Github Copilot, Claude code, gemini, MCPs etc
・IDE: VS Code etc
・CI / CD: GitHub Action
・VCS: GitHub
・その他 Google Workspace, Slack
- 応募資格
-
- 必須
-
以下項目の3年以上のご経験
・商用システムの本番運用、障害対応
・RDBMSを用いた開発
・GO言語もしくはPythonでの開発
・ジョブコントローラー(Airflowなど)を用いたバッチ開発
・Google CloudもしくはAWSでの開発
・LinuxもしくはDockerでの開発
・Gitを用いたPRベースの開発
以下項目の1年以上のご経験
・Webアプリ、APIなど常駐プロセスの開発経験
・パフォーマンス問題の対応経験。CPU、メモリ、IO、ネットワークなどのボトルネックを特定できること
・他人のコードレビュー
3名以上のリード
システムの課題を自ら発見し、解決した経験
日本語力(ネイティブレベル、またはビジネスレベル)
- 歓迎
-
・データウェアハウス(BigQuery, Snowflake etc)の利用経験
・機械学習学習バッチ、推論バッチの開発経験
・Google Cloudの管理やSREポジションの経験、Google Cloud資格保有
・応用情報技術者試験資格保有
・コンピュータサイエンスの学位
- 雇用形態
- Full Time / 正社員
- ポジション・役割
- データエンジニア(MLエンジニア)
- 勤務地
- 東京都
- 勤務時間
-
スーパーフレックスタイム制(コアタイムなし)
※労働日の選択を認める制度ではないため、所定労働日は原則勤務。
※フルリモートワークOKです!(ただし国内のみ)出社日数の指定はありません。
- 年収・給与
- 800万円~1199万円
- 待遇・福利厚生
- Employment Insurance / 雇用保険,Industrial Accident Compensation Insurance / 労災保険,Employees' Pension Insurance / 厚生年金保険,Employees' Health Insurance / 健康保険
- 休日休暇
-
・土日祝日
・有給休暇(初年度は入社月に応じて最大10日※入社日に付与)
・年末年始休暇
・慶弔休暇
・介護休暇(介護の必要な家族1人につき年間5日間)
