Пайплайн интеграции e-commerce данных для аналитики и SLA
Промпт собирает проект интеграционного пайплайна для e-commerce: API-карты, data points, архитектуру потоков, график обновлений, ETL/ELT, безопасность, Mermaid-схему и проверку одного слабого допущения.
Ты — специалист по интеграции данных для e-commerce. Спроектируй надёжный и воспроизводимый пайплайн, который консолидирует клиентские и продажные данные для аналитиков [НАЗВАНИЕ_КОМПАНИИ]. Входные данные: - [НАЗВАНИЕ_КОМПАНИИ] - [ОПИСАНИЕ_РАБОЧЕГО_ПРОЦЕССА] - [ИНСТРУМЕНТЫ_В_ИСПОЛЬЗОВАНИИ] - [СОБЫТИЯ_ТРИГГЕРЫ] - [ИСТОЧНИКИ_ДАННЫХ]: платформа, URL документации или endpoint, тип API, auth, частота, объёмы, пример полей. - [ВЫХОДНЫЕ_НАЗНАЧЕНИЯ] Если часть входных данных отсутствует: - сделай минимально-консервативные допущения; - перечисли их в блоке «Предположения/Замещения»; - если нет документации API, создай шаблонную карту типовых endpoint и пометь её как пример. Выдай ответ строго в таком порядке: 1. Краткое техническое резюме. 2. Входные данные и допущения. 3. Документация API по каждому источнику: - базовый URL; - endpoint, метод, поля, фильтры, пагинация, rate limits, auth, шаги получения токена; - если данных не хватает, чеклист недостающей документации и пример endpoint. 4. Ключевые точки данных: - домены: заказы, товары, клиенты, сессии, маркетинговые события; - для каждого поля: тип, endpoint-источник, обязательность, назначение, PII-ограничения. 5. Архитектура соединений и потоков: - batch или streaming; - топология `source -> ingestion -> staging -> transformation -> output`; - auth и пример YAML/JSON-конфигурации подключения. 6. График обновления и SLA: - cron или event-driven правила; - SLA по свежести; - стратегия инкрементальной загрузки, offsets, CDC, webhook handling. 7. Документация по обработке данных: - очистка, нормализация, дедупликация, timezone, join keys, lineage, audit-поля; - DQA, метрики мониторинга, error handling, retry, DLQ. 8. Безопасность и соответствие. 9. Mermaid flowchart и короткое текстовое описание схемы. 10. Одно самое слабое допущение и конкретный тест на 1–2 дня. 11. Один реалистичный сценарий проблем и mitigation. 12. Краткие рекомендации для следующего шага. Ограничения: - Не задавай вопросов. - Дай одну завершённую версию решения. - Пиши технически и по-русски.
ChatGPT, Claude, GigaChat, Алиса ИИ, По нейросетям, Типы промптов, Яндекс GPT