募集要項
- 仕事内容
-
アドバンストテクノロジー部では、Hadoopによるデータ処理基盤を構築し、各サービスの企画者・エンジニアに公開してきました。2020年後半からはクラウド(GCP)へ基盤を移し、社内のデータレイクとしての活用を目指しています。新しく配属される方には、データ基盤の構築運用とデータフローの維持管理に加えて、事業課題を解決するための提案と検証、リリースまでの活動をお願いします。
【具体的な業務内容】
▽これまでの主な業務は以下のとおりです。
■GCP上のデータ基盤の設計/構築、オンプレ基盤からの移行
■RDBのデータやログファイルなどをデータ基盤にインポートする仕組みの開発/運用
■セミリアルタイムデータ投入APIの開発/運用
■他ツール(Analytics, BI, DMP等)とのデータ連携処理の設計/構築
■アドホック分析エンジンとしてPrestoやBigQueryの導入検証
▽今後は以下のような業務が予定されています。
■クラウドの機能を活用した運用能力向上/機能追加/コスト低減
■社内(他のクラウド環境/SaaS)に分散したデータ処理環境の統合に向けた計画
■BigQueryの検証/導入
■データ基盤を用いた事業課題解決の支援
- 応募資格
-
- 必須
-
【必須経験・スキル】
■サーバー構築/運用経験
■Pythonなどスクリプト言語での開発経験
■データベースに関する基礎知識とSQLの利用経験
■英語での情報検索/読解能力
【歓迎スキル・経験】
■インフラの選定、設計、チューニング経験
■冗長化、監視、セキュリティに関する基礎知識
■OS、ネットワーク、ストレージなどの内部構造やチューニング、問題解決についての深い知識
■分散処理システムの構築、活用、長期運用経験
(Hadoop, Hive, Spark, Kafka, HBase, Redshift, BigQueryなど)
■AWS、GCPにおけるデータ処理基盤の構築経験
■大規模データのデータマネジメントに関する知識と実務経験
■機械学習、自然言語処理、統計解析、データ分析のいずれかに関する基礎的、専門的な知識
■情報検索、レコメンデーション、サジェストなどデータ活用アルゴリズムの考案、実装経験
- 雇用形態
- 正社員
- 勤務地
- 東京都
- 年収・給与
- 499~720万円