募集要項
- 仕事内容
-
▼職務内容
当社はビジネス全体にデータサイエンスとテクノロジーを活用しており、配送センターでの数百台のロボット活用など、新しい切り口でチャレンジを続けているテックカンパニーです。
急速に拡大を続けるビジネスの変化に対応するため、全面的に国内ECシステム基盤の刷新を進めています。このECシステム基盤は、検索システム， API基盤やデータ基盤などのシステムを含み、また基幹システム， 商品情報管理システム， マーケティングシステムなど様々なシステムとの連携が必要となるなど、システム全体として非常に規模が大きく、チャレンジングなものとなっています。
本ポジションでは、データを専門としたソフトウェアエンジニアとして、これらのシステムに対し大量のデータを高速に連携するためのリアルタイムデータパイプラインの構築、運用を担当いただきます。
例えば、バリエーションに富むデータソースからデータ連携するシステムの構築、大量のデータをリアルタイムに処理するためストリーム処理システムの構築、検索や推薦などのデータ利活用サービスのためにデータ提供を行うシステムの構築、データの完全生や一貫性を保つための仕組みの構築など技術的に高度な課題が多くあります。リアルタイムデータパイプラインは今後、当社のシステム全体のデータロジスティクスの中心となるプラットフォームで、ECシステムの中心となる重要な要素です。
▼主な役割
・データパイプラインの開発運用
・ストリーム処理の開発運用
・各種データソースとデータパイプラインの連携のためのシステムの開発運用
・ETL処理基盤の開発運用
・データ提供のためのAPIの開発
【主な使用技術】
Google Cloud(BigQuery， Bigtable， Cloud Pub/Sub， Memorystore for Redis， Looker， Looker Studio， etc.) / dbt / Kubernetes / Apache Kafka / Github Enterprise / Argo CD / Argo Workflow / Python / Go
- 応募資格
-
- 必須
-
▼求めるスキル・経験
・データを扱うシステムの業務に携わった経験（2年以上）
【例】
・データ分析基盤・機械学習システムの設計・開発・運用
・Webシステムにおけるデータベースの設計・開発・運用
・クラウドサービスのDWHやBIの選定・導入・運用
etc.
▼あると望ましいスキル・経験
・データ基盤の開発運用経験
・データメッシュ、大規模データ管理(オライリー)、DMBOKの理解や業務に活用した経験
・ETL， ELT， reverseETL処理の開発運用経験
▼データ系エンジニアについて
「アナリティクスエンジニア」「ソフトウェアエンジニア (データ基盤)」について。
下記ワードについて、より興味が合致する方にご応募ください！
●アナリティクスエンジニア
https://hrmos.co/pages/monotaro/jobs/104B0816_001
・データの管理、利活用の促進
・データマネジメント
・データガバナンス
・dbt， dataform
・BI（looker、tableauなど）
・データウェアハウス、データマート
●ソフトウェアエンジニア (データ基盤) ※当ポジション
https://hrmos.co/pages/monotaro/jobs/102A0101_019
・データ収集、流通
・異なるデータベース間のレプリケーション
・大規模データを用いたAPI基盤
・大規模データのバッチ、ストリーミング処理
・データレイク（BigQuery）
・NoSQL（Bigtable、Redis）
・メッセージングサービス（GCP Pub/Sub、Apache Kafka）
- 雇用形態
- 正社員
- 勤務地
- 大阪府
- 年収・給与
- 550～1000万円
