Перейти к содержимому

Экспорт данных из AppMetrica — в ваш ClickHouse

У вас уже есть AppMetrica. Мы доставляем её raw-данные о событиях приложения, e-commerce, revenue и крэшах в ваш ClickHouse — стабильно, без поддержки коннектора своими силами. Через наш Logs API connector — суточная выгрузка событий.

Обсудить проект

Зачем выгружать данные AppMetrica в собственное хранилище?

AppMetrica собирает события мобильного приложения внутри своего сервиса. Стандартный UI показывает агрегаты — отчёты по установкам, поведению, монетизации. Как только нужно строить собственные модели атрибуции, объединять mobile-данные с web-сайтом и CRM, считать LTV по сегментам или ROAS по своим разрезам — данных в UI AppMetrica становится недостаточно. Нужны сырые события в собственной БД, рядом со всеми остальными источниками.

DataGo подключается к AppMetrica через наш Logs API connector и доставляет события в ваш ClickHouse в исходном виде. Дальше эти данные ложатся рядом с расходами из 20+ рекламных систем, заказами из CRM и событиями web-сайта (через DataGo Streaming или экспорт данных из Метрики) — основа для собственного Marketing DWH.

Важно

Logs API работает на бесплатной AppMetrica — отдельные платные подписки не требуются. Если вам нужна AppMetrica Pro — мы сертифицированный партнёр Яндекса.

Logs API connector — раз в сутки в ваш ClickHouse

Наш коннектор

DataGo Logs API connector

Собственный коннектор DataGo к AppMetrica Logs API. Суточная выгрузка raw-данных в ваш ClickHouse. Работает на обычной (бесплатной) AppMetrica.

  • Все 14 типов данных AppMetrica: события, e-commerce, revenue, крэши, push, deeplinks и др.
  • Идентификаторы: DeviceID, ProfileID, IDFA — match с web и CRM
  • Атомарная суточная выгрузка — без частичных загрузок и дублей
  • DataGo держит коннектор актуальным при изменениях API
  • Мониторинг доставки и алерты на нашей стороне
  • Восстановление пропущенных дней — без действий с вашей стороны

У AppMetrica есть также Data Stream API — поток событий в близком к real-time режиме (5-минутные окна). Если вам нужен именно real-time поток — обсудим отдельно.

Спецификация

Что вы получите в вашем ClickHouse

Сырые события AppMetrica, без агрегации, в собственной БД клиента. Все поля Logs API без обрезок.

Формат данных
Raw events
Без агрегации и семплирования
Идентификаторы
DeviceID, ProfileID, IDFA / Google Ad ID
Match с CRM по ProfileID, web↔app через UserID
Типы данных
События, e-commerce, revenue, ad revenue, сессии, push, крэши
Все типы AppMetrica Logs API
Mobile-специфика
Крэши, ошибки, push-токены, deeplinks, постбеки
Доступно для аналитики качества приложения
Поля устройства
OS и версия, модель, локаль, сеть, гео
Стандартный набор AppMetrica
Частота
1 раз в сутки
Атомарная выгрузка за прошедший день
Объём
Без ограничений со стороны DataGo
Ограничения только тарифа AppMetrica
Хранение
В вашем ClickHouse
Данные принадлежат вам

Logs API connector, который просто работает

Поддерживаем AppMetrica Logs API в одном контуре с экспортом Метрики и рекламными коннекторами — стабильно, под мониторингом.

01

Устойчивость к изменениям API

API AppMetrica иногда меняется. Мы держим коннектор актуальным — наблюдаем за изменениями и катим фикс при необходимости.

02

Атомарная выгрузка

Сутки данных всегда выгружаются целиком и за раз. Никаких частичных загрузок и дублей в ClickHouse.

03

Мониторинг доставки

Алерты на нашей стороне при сбое выгрузки. Восстановление пропущенных дней — без дополнительных действий с вашей стороны.

04

Историческая глубина

При первичном подключении выгружаем всю доступную историю AppMetrica — склеиваем несколько запросов в один бэкафилл, не только новые события.

Экспорт из AppMetrica в Marketing DWH DataGo

Fig. 01 · Типовая схема Marketing DWH DataGo

Нажмите, чтобы открыть в полном размере

Экспорт данных из AppMetrica — часть L1 (Сбор данных). Доставляет события в ClickHouse для дальнейшей подготовки и витрин.
Типовая схема архитектуры Marketing DWH DataGo
01

Сбор данных (L1)

Для сбора пользовательских данных подключается экспорт из AppMetrica (mobile), DataGo Streaming или экспорт Метрики (web). На этом же слое — импорт расходов из 20+ рекламных систем и данных из CRM.

02

Подготовка (L2)

Поверх raw-данных рассчитываются сессии, формируются витрины Cost Data, User Profile (web+app склейка), User Path. Атрибуции — параллельно.

03

Витрины и отчёты (L3)

Над витринами строятся Performance, ROPO, Медийка, SEO и mobile-специфика: LTV, retention, cohort.

Кому подходит экспорт данных из AppMetrica?

Подходит

Экспорт данных из AppMetrica имеет смысл для команд, у которых:

  • Уже работает AppMetrica

    и mobile-аналитическая команда хочет работать с raw-событиями, а не только с UI-отчётами

  • Нужно объединить mobile с web и CRM

    единые витрины поверх событий AppMetrica, DataGo Streaming и заказов из CRM

  • Считаете LTV, retention, cohort по своим разрезам

    агрегатов UI AppMetrica для этого недостаточно

Не подходит

Прямо говорим, когда экспорт данных из AppMetrica не закрывает задачу:

  • Нужны только отчёты в UI AppMetrica

    экспорт не даст ничего сверху — стандартных отчётов достаточно

  • Нет своей БД и нет планов её разворачивать

    это не SaaS-отчёт, это поток сырых данных в инфраструктуру клиента

Не уверены, ваш ли это случай? Обсудим — подскажем подходящий инструмент, даже если это не экспорт из AppMetrica.

Обсудить проект

Частые вопросы

Семь вопросов, которые задают чаще всего. Если вашего здесь нет — обсудим на звонке.

Стандартный UI AppMetrica даёт агрегаты по предзаданным разрезам — установки, retention, cohort. Свои модели атрибуции, объединение с web-сайтом и CRM, расчёт LTV по сегментам, mobile-funnel по событиям — на UI-агрегатах не построить.

Нужны события «как они есть», в собственной БД, рядом с другими источниками. Тогда можно строить свои модели и витрины без ограничений UI AppMetrica.

DataGo App Streaming — это наш собственный SDK для мобильного приложения. События собираются по схеме GA4, доставляются в ваш ClickHouse в близком к real-time режиме.

Экспорт данных из AppMetrica — это доставка событий, которые уже собирает AppMetrica, в ваш ClickHouse.

Часть клиентов использует оба источника параллельно: DataGo App Streaming как «свой» поток с гарантированной схемой, AppMetrica — для сходимости с её отчётами и для функций, которые есть только в AppMetrica (трекинг installs, postbacks, push-токены).

Нет. AppMetrica Logs API доступен на обычной (бесплатной) AppMetrica. AppMetrica Pro даёт расширенные функции в UI и в самом сервисе, но для DataGo Logs API connector она не требуется.

У AppMetrica есть Data Stream API — поток событий в близком к real-time режиме (5-минутные окна).

Если вам нужен именно real-time поток — обсудим отдельно: либо настроим Data Stream под вас, либо предложим DataGo App Streaming как альтернативу.

DataGo держит AppMetrica Logs API connector актуальным. Наблюдаем за изменениями API и катим фикс при необходимости — это часть SLA на коннектор. Клиенту не нужно нанимать mobile-engineer’а под поддержку Logs API.

Logs API — около 2 недель от договора до первых данных в ClickHouse. Параллельно идут юридические и технические шаги: договор, гостевой доступ к AppMetrica, настройка коннектора, подключение ClickHouse, сверка данных.

Да. Экспорт данных из AppMetrica может использоваться автономно — без остальной платформы DataGo.

Возможны два сценария:

• Команда аналитиков клиента работает с данными напрямую. Мы доставляем raw-данные AppMetrica в ваш ClickHouse и поддерживаем коннектор. Дальше аналитики на стороне клиента строят витрины, отчёты и модели сами.

• Подключаемся по слоям. При необходимости поверх экспорта добавляются Витрины данных, Атрибуция и Отчёты — не обязательно сразу всё.

Подключим экспорт данных из AppMetrica в ваш ClickHouse

Расскажите про текущий стек — AppMetrica, ClickHouse, аналитическая команда, есть ли уже web-аналитика рядом. Предложим оптимальную интеграцию и оценим сроки.

Если сообщите — успеем подготовить первичное предложение к созвону

Текущие основные задачи
Marketing DWH = это
01 · вы здесь

Сбор данных

DataGo Streaming, Метрика, AppMetrica, AppsFlyer, коннекторы

02

Витрины данных

Data Marts для аналитиков

03

Атрибуция

Funnel-based, Shapley, Markov

04

Отчёты

Performance, ROPO, Медийка, SEO и другие