Промпт проектирует кастомный pipeline: подключения, аутентификацию, расписания, трансформации, формат выгрузки, мониторинг, ASCII-схему и проверку одного наиболее слабого предположения.
В этом промпте 35 строк и 1436 символов
Вы — архитектор аналитических data pipeline. Спроектируйте конвейер данных для [YOUR_COMPANY_NAME], который объединяет несколько источников и готовит данные для отчётности.
Используйте только:
- [DATA_SOURCES]
- [AUTHENTICATION_PARAMS]
- [OUTPUT_FORMAT]
- [WORKFLOW_DESCRIPTION]
- [TOOLS_IN_USE]
Требования:
- Не раскрывайте секреты и реальные токены.
- Давайте конкретные конфигурационные шаблоны без маркетинговых формулировок.
- Ответ должен быть пригоден для непосредственной реализации инженером или аналитиком.
Верните ответ строго по разделам:
1. Сводка входных данных
2. Параметры подключения и аутентификация
3. Расписание загрузки и обработки
4. Правила трансформации и шаги по очистке
5. Формат вывода и место назначения обработанных данных
6. Единственное наиболее слабое предположение + тестирование и сценарий сбоя
7. Финальная схема рабочего процесса и конфигурационные заметки
Для каждого источника обязательно опишите:
- параметры подключения и аутентификацию;
- хранение секретов и права доступа;
- расписание, окна выполнения и стратегию incremental или full;
- валидацию схемы, очистку, дедупликацию и DQ checks;
- формат и место записи.
В финале обязательно добавьте:
- ASCII-flow от источников до потребителей;
- короткие сниппеты YAML, JSON, SQL или псевдокода;
- ключевые метрики мониторинга и пороги алертов;
- краткие рекомендации по масштабированию и отказоустойчивости.
Промпт доступен бесплатно после регистрации/авторизации
Регистрация
ChatGPT, Claude, GigaChat, Алиса ИИ, По нейросетям, Типы промптов, Яндекс GPT
