募集要項
- 仕事内容
-
「スタンバイ」のデータエンジニアとして、ビッグデータ解析/分散処理基盤開発をお任せします。
2019年にヤフー株式会社(以下、ヤフー)を傘下に持つZホールディングス株式会社(以下、Zホールディングス)と株式会社ビズリーチ(現、ビジョナル株式会社)との合弁会社として新たなスタートを切り、ヤフーをはじめとしたZホールディングスが持つ様々なグループアセットと連携することも可能になりました。今後様々な連携を行っていく上でのデータ基盤開発を強化していく方針であり、その推進をお願いできればと考えております。
▼具体的には
・AWSを利?したビッグデータ解析?分散処理基盤のアーキテクチャ選定から設計・実装、運?フロー?動化の提案、実装
・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定
・各所ニーズ(マーケター、サイエンティスト、機械学習エンジニアなど)に応じたデータセットの作成
・機械学習エンジニアと協業し、機械学習モデルのAPI環境の実装や、git,CI/CDの仕組み作りと維持
【開発環境】
サーバーサイド:Scala, Play Framework, ZIO, Flink
プロビジョニング:Terraform, Ansible
フロントエンド:JS, TypeScript, Vue.js
監視:DataDog, Kibana
クラウドサービス:AWS
分析基盤:fluentd, BigQuery, Athena, Google Data Studio, Redash
AWS:ECS, Fargate, Kinesis Data Stream, Lambda, EMR, RDS, Aurora, S3, CloudFront, ElastiCache
開発ツール:Github, Slack, Intellij IDEA, Jenkins, JIRA, SlackBot
仮想化基盤:Docker, Kubernetes
その他使用言語:Python, Go
ミドルウェア:Elasticsearch, nginx, MySQL, ClickHouse
- 応募資格
-
- 必須
-
【必須スキル】
・データ基盤をプロダクト開発チームに展開・適用した経験
・データ処理基盤の設計/構築、または運用経験
・AWSを利用したサービスの構築経験
【歓迎スキル】
・データ基盤チームの立ち上げ、チームリードの経験
・AWSのEMR, KinesisStream, SQSなどを利?した開発経験
・Spark, Flink, Beam, akkaなどを利?した開発経験
・BigQuery, Hive, RedShiftなど利?・運?経験
・Docker, k8s, GKE, ECSなどの運?経験
・GCPのDataFlow、PubSubなどを利?した開発経験
・アジャイル(スクラムベース)での開発経験(CSM, CSPO, CSD保有者歓迎)
- 雇用形態
- 正社員
- 勤務地
- 東京都
- 年収・給与
- 500~1500万円