データプラットフォーム開発エンジニア
- データエンジニア
- 650万円 〜 1,800万円
最終更新日:
仕事内容
【ミッション】
SB Intuitions社内の大規模データの管理・活用を支えるデータプラットフォームの設計・構築・運用を通じて、データドリブンでイノベーションを推進します。また、データ品質の向上、セ
開発環境
インフラ:オンプレミス、Slurm、Kubernetes、AWS、Amazon S3
開発言語:Python
その他 :GitHub, Confluence、JIRA、Slack
求めるスキル
必須スキル/経験
・大規模データプラットフォームの設計・構築・運用経験
・データベースやデータレイクに関する知識
・クラウド環境(AWS/GCP/Azure)でのシステム開発・運用経験 (3年以上)
・Python・Java・Go いずれかのプログラミング業務経験 (3年以上)
・Kubernetes、Dockerを使ったミドルウェアやサービスの開発と運用の経験
歓迎スキル/経験
・LLMOps、MLOpsの開発、運用経験
・DMBOKに基づいたデータガバナンス/品質管理の経験
・オブジェクトストレージ(S3)や分散型ファイルシステムに関する知識と運用経験
・IAM制御・管理の経験
・データカタログツールの導入・運用経験
・分散コンピューティング(Hadoop/Sparkなど)の知識と実務経験
・データ処理基盤のパフォーマンス最適化経験
・法令遵守、セキュリティ管理・対策に関する知識と経験
求める人物像
当社の事業内容、ミッションに共感し、新たな事業への挑戦姿勢・意欲を持った方
仕事の魅力
・日本語性能で国内No.1の大規模言語モデル(LLM)を目指し、当社の所有する国内最大規模の計算基盤を使って国産の大規模言語モデルの研究開発に貢献できます。
・大規模データ環境の管理を通じて、最先端のLLM技術に触れ、LLMOpsに関わる経験ができます。
募集条件
求人の特徴
こだわり条件
利用技術
趣向性
- これまでにない挑戦
- 新しい取り組み・技術の活用
- 自ら主体的に取り組む姿勢
- ビッグデータ・データ解析
- 開発の効率化・最適化
- 研究開発
- ミドルウェア開発
- セキュリティ
- サービスの運用・保守
- サービスの仕様策定・設計