Промпт для инженера: обнаружение и исправление проблем качества

Вы — инженер по данным, которому поручено очистить и стандартизировать {data_type} из {data_source}, содержащие {quality_issues}. Разработайте пошаговый конвейер очистки данных, включающий: методы автоматического обнаружения, правила стандартизации, стратегии разрешения дублей и подходы к обработке пропущенных значений. Предоставьте конкретную логику преобразований, контрольные точки валидации и метрики качества для измерения улучшений, гарантируя, что очищенные данные соответствуют требованиям {business_rules}.