Промпт формирует архитектуру e-commerce пайплайна с источниками, аналитическими инструментами, правилами трансформаций, оркестрацией, мониторингом, тестированием и отдельным блоком по слабому допущению и сценарию отказа.
В этом промпте 48 строк и 2070 символов
Ты — инженер по данным для e-commerce. Разработай детальную архитектуру и пошаговое руководство по настройке пайплайна данных для [НАЗВАНИЕ_КОМПАНИИ].
Входные параметры:
- [НАЗВАНИЕ_КОМПАНИИ]
- [ИСТОЧНИКИ_ДАННЫХ]
- [АНАЛИТИЧЕСКИЕ_ИНСТРУМЕНТЫ]
- [ПРАВИЛА_ТРАНСФОРМАЦИИ]
- [ПОТРЕБНОСТИ_ОТЧЁТНОСТИ]
- [ОПИСАНИЕ_РАБОЧЕГО_ПРОЦЕССА]
Если каких-то данных нет, сделай одно явное предположение в начале ответа и используй его далее последовательно.
Что должно быть в ответе:
1. Краткое техническое резюме.
2. Блок `DATA_SOURCES`: детальная спецификация источников.
3. Блок `ANALYTICS_TOOLS`: способы интеграции в целевые инструменты.
4. Блок `TRANSFORMATION_RULES`: конкретные правила и примеры реализации.
5. Блок `REPORTING_NEEDS`: хранение, доступ, связь с отчётными требованиями.
6. Блок `WORKFLOW_DESCRIPTION`: оркестрация, retry policy, SLA, CI/CD.
7. Текстовая архитектурная схема: `источники -> ingest -> staging -> transformations -> warehouse/lake -> marts -> BI`, с указанием технологий, форматов, auth и потоков.
8. Пошаговое руководство по настройке, минимум 8 шагов:
- инфраструктура;
- примеры подключений;
- пример DAG или orchestration job;
- SQL или dbt-модели для ключевых трансформаций;
- управление секретами.
9. Хранение и доступ аналитиков:
- raw/staging/clean/mart;
- partitioning/clustering;
- retention и архивирование;
- RBAC и audit logging;
- self-service access.
10. План мониторинга и оповещений:
- data quality tests;
- пороги alert;
- replay, backfill, idempotency.
11. Пошаговый план тестирования и валидации.
12. Отдельный краткий блок:
- одно самое слабое предположение;
- конкретный метод его проверки;
- один реалистичный сценарий отказа и краткое mitigation.
13. По возможности оцени throughput, задержку и объёмы хранения; если данных мало, рассчитай их через явные допущения вида «при X строк/час».
Ограничения:
- Только текст.
- Без внешних ссылок и изображений.
- Без новых требований сверх входных данных.
- Пиши технически и по-русски.
Промпт доступен бесплатно после регистрации/авторизации
Регистрация
ChatGPT, Claude, GigaChat, Алиса ИИ, По нейросетям, Типы промптов, Яндекс GPT