Cost-Effective Data Pipelines: Balancing Trade-Offs When Developing Pipelines in the Cloud (2023) (Sev Leonard)

Автор: Sev Leonard

Низкая стоимость начала работы с облачными сервисами может легко превратиться в значительные расходы в дальнейшем. Это непросто для команд, разрабатывающих конвейеры данных, особенно когда быстрые изменения в технологии и нагрузке требуют постоянного цикла перепроектирования. Как обеспечить масштабируемость и высокую доступность продуктов и при этом не потерять в стоимости?

В этом практическом руководстве автор предлагает целостный подход к проектированию масштабируемых конвейеров данных в облаке. Инженеры по обработке данных, разработчики программного обеспечения и архитекторы среднего уровня узнают, как найти компромисс между стоимостью и производительностью, как выбирать и настраивать вычислительные системы и системы хранения данных. Вы также узнаете о лучших практиках разработки кода, тестирования и мониторинга.