Основы эффективной обработки данных

Этот курс предоставляет фундаментальное понимание того, как управлять сложными задачами пакетной обработки с использованием отраслевой стандартной платформы Spring Batch. Вы пройдете путь от базовой терминологии до создания сложных конвейеров данных, которые могут обрабатывать миллионы записей без вмешательства вручную. К концу этого курса вы сможете разрабатывать и внедрять автоматизированные пакетные задания, которые являются масштабируемыми и простыми в обслуживании. Что вы узнаете: - Понимание фундаментальной архитектуры заданий, шагов и задач - Настройка ItemReaders и ItemWriters для взаимодействия с базами данных MySQL - Практика реализации обработки на основе блоков для оптимального управления памятью - Применение современных возможностей Java, таких как записи, для упрощения объектов передачи данных - Интеграция пакетных рабочих процессов с Jenkins для автоматического планирования и выполнения - Узнайте, как обрабатывать сбои с помощью встроенных политик повтора и пропуска - Понимание основных методов мониторинга для отслеживания состояния и производительности работы Курс начинается с основных определений и жизненного цикла пакета, а затем проводит вас через практическую настройку рабочих процессов и автоматизации, основанных на базе данных. Эта программа создана специально для начинающих и разработчиков, переходящих к инженерии данных в бэк-офисе; предыдущий опыт пакетной обработки не требуется. Начните создавать надежные системы обработки данных сегодня.