データプラットフォーム技術バイブル

要素技術の解説から実践的な構築法、利活用まで

マイナビ出版
島田雅年　藪本晃輔　丸山弘詩　

• 価格: 4,840円（本体4,400円＋税）
• 発行年月: 2025年03月
• 判型: Ｂ５
• ISBN: 9784839970796

内容情報

[BOOKデータベースより]

「データプラットフォーム」はアプリケーションやユーザー行動のログなど、あらゆるデータを格納する基盤であり、ビジネスを支える重要な土台です。しかし、その構築には多くの専門知識が必要です。本書では、データプラットフォームの構築に必要な技術や知識について普遍的な情報に焦点を当てつつ、「なぜその技術が支持され開発され続けているのか？」といった背景にまで踏み込んで解説します。

１　データプラットフォーム概論
２　データプラットフォームの構成要素
３　ログ転送
４　データ変換・転送　バッチ編
５　データ変換・転送　ストリーミング編
６　データプロビジョニング
７　データマネジメントを支える技術
８　要件分析
９　データプラットフォームの構築
１０　データプラットフォームの改善

[日販商品データベースより]

★大規模プロジェクトを複数手掛ける著者2名が執筆！
★500ページ超のボリュームで包括的に解説！

近年、データ活用の重要性が高まる一方で、適切な技術を選んで効果的に活かすことは容易ではありません。データ基盤の構築手段は多様化しているため、どの技術をどのように組み合わせるべきか迷う場面も多いでしょう。

本書は、ビジネスの成長に不可欠な「データプラットフォーム」の構築と活用について解説する一冊です。ユーザー行動やセンサーログなどのデータを収集・整理し、ETL処理やELT処理を経て価値ある情報に変換し、意思決定に活かす方法を紹介します。データ品質の維持や、効率的な分析手法についても詳しく解説しています。

DX（デジタルトランスフォーメーション）が進むなか、データとデジタル技術の役割はさらに重要になっています。本書では、Apache
Sparkをはじめとする技術の選定や活用方法、設計の考え方を詳しく解説。最新技術だけでなく、将来の変化にも対応できる普遍的な知識を提供します。データを活用してビジネスの競争力を高めたい方、最適なデータ基盤を構築したい方は、本書を通じてデータプラットフォームの理解を深め、より効果的な活用を目指しましょう。

＜本書で紹介する要素技術・原則（一部）＞

・ログ転送：Fluentd
・アーキテクチャパターン：CQRS+ES、Delta、Kappa、Lambda、Lakehouse、メダリオンアーキテククチャ
・データフォーマット：Apache Hudi、Apache Iceberg、Delta Lake
・データレイク：Apache Spark、Databricks
・データウェアハウス：Amazon Redshift、Google BigQuery、Snowflake、Treasure Data
・ストリーミング：Amazon Kinesis、Apache Kafka
・ジョブスケジューラ：Apache Airflow、Digdag
・ETL処理：Apache Spark、Emublk
・ELT処理：dbt
・BIツール：Metabase、Redash
・データサイエンス：A/Bテスト、LLM、MLflow
・設計開発：データメッシュ、ドメイン駆動設計（DDD）、RDRA
・法則・原則：DIKWモデル、SOLID原則、YAGNI原則