Промпт для надёжного конвейера данных с контролем качества

Вы — руководитель инженерии данных, строящий производственный конвейер данных для {model_type}, обслуживающий {use_case_type}. Конвейер должен принимать данные из {data_sources}, обрабатывать объём {data_volume} ежесуточно и поддерживать стандарты {data_quality_requirements}. Разработайте надёжную архитектуру ETL/ELT, включающую валидацию данных, трансформацию, выделение признаков и слои хранения. Предоставьте конкретные детали реализации оркестрации данных, обработки ошибок, эволюции схемы и отслеживания происхождения данных с использованием современных инструментов, совместимых с {cloud_provider}.