Великі дані: принципи і практика побудови масштабованих систем обробки даних в реальному часі 38721

Принципи і практика побудови масштабованих систем обробки даних в реальному часі

У цій книзі подано теоретичні основи організації систем великих даних і пояснюється, яким чином вони втілюються на практиці. В ній розглядається лямбда-архітектура, призначена для побудови подібних систем, та на прикладі конкретного веб-додатки пояснюються особливості реалізації всіх рівнів цієї архітектури за допомогою інструментальних засобів зразок Hadoop, Cassandra і Storm. Для читання цієї книги не вимагається попереднє знайомство з особливостями аналізу великомасштабних даних або баз даних типу NoSQL, хоча корисно знати про традиційних базах даних.

Книга розрахована на читачів, які прагнуть освоїти принципи побудови систем великих даних і впровадити їх на практиці.

У великомасштабних веб-додатки, які підтримують роботу соціальних мереж, виконують аналітику в реальному часі або підтримують електронну торгівлю, доводиться обробляти великі масиви даних, обсяг і швидкість обміну якими перевищують можливості інформаційних систем, заснованих на традиційних базах даних. Для подібних додатків потрібні архітектури, в основі яких лежать кластери машин для зберігання та обробки даних будь-якого обсягу і з будь-якою швидкістю. Правда, масштабованість і простота не є взаємовиключними властивостями подібних архітектур.

Ця книга допоможе читачеві навчитися будувати системи великих даних, використовуючи архітектуру, спеціально призначену для фіксації та аналізу даних в масштабі веб.

В ній представлена проста для розуміння і масштабована лямбда-архітектура, що дозволяє розробляти інформаційні системи зусиллями невеликих команд. У книзі даються теоретичні основи організації систем великих даних і пояснюється, яким чином вони втілюються на практиці. Крім загальної інфраструктури для обробки великих даних, читач може ознайомитися з конкретними технологічними та інструментальними засобами начебто Hadoop, Storm і баз даних типу NoSQL.

У цій книзі розглядаються наступні теми:

• Введення в системи великих даних.
• Опис особливостей обробки даних масштабу веб в реальному часі.
• Застосування інструментальних засобів зразок Hadoop, Cassandra і Storm.
• Можливість розширити свої знання та навички за межі традиційних баз даних.

Для читання цієї книги не вимагається попереднє знайомство з особливостями аналізу великомасштабних даних або баз даних типу NoSQL, хоча корисно знати про традиційних базах даних.

Про авторів

Натан Марц — творець системи Apache Storm і ініціатор застосування лямбда-архітектури для побудови систем великих даних.

Джеймс Уоррен — архітектор-аналітик з кваліфікацією в області машинного навчання і наукових розрахунків.