Книга «Современные архитектуры данных с использованием Python» научит вас беспрепятственно интегрировать ваши задачи машинного обучения и анализа данных в открытые платформы данных. Вы узнаете, как использовать ваши данные для создания открытых платформ данных, совместимых с любыми технологиями, используя проверенные методы, включая архитектуру Medallion и Delta Lake.
Начиная с основ, эта книга поможет вам создавать конвейеры обработки данных на платформе Databricks, открытой платформе данных, используя SQL и Python. Вы получите представление о блокнотах и приложениях, написанных на Python, с использованием стандартных инструментов разработки программного обеспечения, таких как git, pre-commit, Jenkins и Github. Далее вы углубитесь в потоковую и пакетную обработку данных с использованием Apache Spark и Confluent Kafka.