Практический курс по Big Data. Часть 3. RT, NoSQL, Data layout, Kafka

Потоковая обработка данных и работа с NoSQL-хранилищами становятся критическими навыками, когда объемы информации не позволяют использовать классические реляционные базы. Здесь разбирают архитектуры Lambda и Kappa, настройку Kafka для высоконагруженных систем и интеграцию Spark с Cassandra. Вы научитесь переходить от пакетной обработки к Realtime, настраивать семантики доставки сообщений и оптимизировать хранение данных, выбирая между форматами Parquet, ORC и Avro. Основной акцент сделан на решении типичных проблем Big Data, таких как Data Skew, и настройке высокодоступных Key-Value хранилищ.