
Embulkの次、どう選んだ? 〜DMMの事例に学ぶ、 約8兆レコードのETL基盤リプレイス〜
✍️概要
Embulkのメンテナンスモードへの移行を受け、今後のETL基盤の選定や移行を検討しているデータエンジニアも多いのではないでしょうか。
今回は、約8兆レコード規模のデータ基盤を運用するDMMの事例をもとに、Embulkからdltへの移行を決断した背景や、複数の選択肢から移行先を選定した際の判断基準、実際の移行プロセスで直面した課題とその対応についてご共有いただきます。
技術選定から検証・移行までの実践知を通じて、ETL基盤のリプレイスを進める際の具体的なステップや判断のポイントを知り、自社のデータパイプラインの移行を検討・推進するためのヒントを持ち帰れるイベントを目指します。
ぜひ当日のご参加をお待ちしております。
<過去開催回>
過去開催 Data Career Talk (DCT)シリーズイベント 🚪
※アーカイブ動画の閲覧にはFindyへの会員登録が必要です。ご了承ください。
- 第1回 「事業成長を牽引する全社横断データ組織とは?~Sansan&イオンスマートテクノロジーに聞くデータエンジニアの働き方~」
- 第2回 「AIエージェントを支えるデータエンジニアの仕事〜メルカリ&ZOZOの実践〜」
- 第3回 「『エンジニアのための データ分析基盤入門』著者 斎藤 友樹氏に聞く~データ基盤品質向上における基礎とステップアップの道のり~」
- 第4回 「DA・DS出身3名のキャリア変遷とその裏側ーAI時代に自分の価値を出すヒントを得るー」
- 第5回 「セマンティックレイヤーをどう育て、信頼できるAI Agentを開発するか〜カンム&タイミー&メルカリの実践事例〜」
- 第6回 「なぜフルスタックからデータエンジニアに?越境のきっかけと役割のギャップ」
- 第7回 AI Ready組織を見据えた データ基盤戦略とは~IVRy&アイスタイルが語る リアーキテクチャのリアル~」
- 第8回 AI Agentを加速するデータ基盤とは?Sansan&ファインディの設計思想と実践知」
- 第9回 第一線で活躍するデータエンジニア・データ組織 AI Agent活用の裏側 Devin編 10X・サイバーエージェント登壇」
- 第10回 AI時代のデータガバナンス 誰を巻き込みどうつくる?freee・LegalOn Technologiesに学ぶ ルール・権限・組織づくり」
🕛タイムテーブル
| 時間(バッファ込み) | セッションタイトル |
|---|---|
| 12:00~12:02 | オープニング |
| 12:02~12:27 | 「約8兆レコードを支えるDMMデータ基盤のEmbulkリプレイス」 合同会社DMM. com / 高橋 慶さん |
| 12:27~12:40 | 質疑応答 |
| 12:40~12:45 | クロージング |
※セッション内容は変更の可能性があります、ご了承ください。
🧑💻こんな方におすすめ
- Embulkを利用したETL/データパイプラインの開発・運用に携わっているデータエンジニア
- Embulkから別技術への移行を検討している、または今後の継続利用に課題を感じている方
- 移行先の技術選定や、既存パイプラインを安全に移行するための具体的な事例を知りたい方
☑️イベントのゴール
- Embulkから移行した企業が、どのようにスピード感をもって移行を決断し、何を基準に移行先を選んだのか参考になった
- 技術選定から検証・移行まで、実際にどのようなステップでリプレイスを進めたのかイメージできた
- 移行時に発生した課題や工夫を知り、自社で移行を検討・推進する際の判断材料を持ち帰れた




.jpg&w=3840&q=75)