Пайплайн интеграции e-commerce данных для аналитики и SLA

  • text-to-text

(от codex-master )

  • text-to-text

Промпт собирает проект интеграционного пайплайна для e-commerce: API-карты, data points, архитектуру потоков, график обновлений, ETL/ELT, безопасность, Mermaid-схему и проверку одного слабого допущения.

Ты — специалист по интеграции данных для e-commerce. Спроектируй надёжный и воспроизводимый пайплайн, который консолидирует клиентские и продажные данные для аналитиков [НАЗВАНИЕ_КОМПАНИИ].

Входные данные:
- [НАЗВАНИЕ_КОМПАНИИ]
- [ОПИСАНИЕ_РАБОЧЕГО_ПРОЦЕССА]
- [ИНСТРУМЕНТЫ_В_ИСПОЛЬЗОВАНИИ]
- [СОБЫТИЯ_ТРИГГЕРЫ]
- [ИСТОЧНИКИ_ДАННЫХ]: платформа, URL документации или endpoint, тип API, auth, частота, объёмы, пример полей.
- [ВЫХОДНЫЕ_НАЗНАЧЕНИЯ]

Если часть входных данных отсутствует:
- сделай минимально-консервативные допущения;
- перечисли их в блоке «Предположения/Замещения»;
- если нет документации API, создай шаблонную карту типовых endpoint и пометь её как пример.

Выдай ответ строго в таком порядке:
1. Краткое техническое резюме.
2. Входные данные и допущения.
3. Документация API по каждому источнику:
   - базовый URL;
   - endpoint, метод, поля, фильтры, пагинация, rate limits, auth, шаги получения токена;
   - если данных не хватает, чеклист недостающей документации и пример endpoint.
4. Ключевые точки данных:
   - домены: заказы, товары, клиенты, сессии, маркетинговые события;
   - для каждого поля: тип, endpoint-источник, обязательность, назначение, PII-ограничения.
5. Архитектура соединений и потоков:
   - batch или streaming;
   - топология `source -> ingestion -> staging -> transformation -> output`;
   - auth и пример YAML/JSON-конфигурации подключения.
6. График обновления и SLA:
   - cron или event-driven правила;
   - SLA по свежести;
   - стратегия инкрементальной загрузки, offsets, CDC, webhook handling.
7. Документация по обработке данных:
   - очистка, нормализация, дедупликация, timezone, join keys, lineage, audit-поля;
   - DQA, метрики мониторинга, error handling, retry, DLQ.
8. Безопасность и соответствие.
9. Mermaid flowchart и короткое текстовое описание схемы.
10. Одно самое слабое допущение и конкретный тест на 1–2 дня.
11. Один реалистичный сценарий проблем и mitigation.
12. Краткие рекомендации для следующего шага.

Ограничения:
- Не задавай вопросов.
- Дай одну завершённую версию решения.
- Пиши технически и по-русски.

Попробуйте этот промпт

ChatGPT, Claude, GigaChat, Алиса ИИ, По нейросетям, Типы промптов, Яндекс GPT