Полнота и достоверность данных

Задача StreamMyData заключается в максимально полном сборе достоверных данных из различных источников.
Представим себе, что вам нужно выгружать данные из Яндекс.Директ. Внутри вашего рекламного аккаунта есть несколько рекламных кампаний, который работают на основе автоматических стратегий за целевое действие.
Предположим, что 1 января по рекламе из такой рекламной кампании перешел пользователь на сайт рекламодателя и ничего не купил. Когда 2 января мы выгрузим статистику по расходам рекламной кампании за 1 января, то расход будет равен 0.
Если 2 января пользователь, который пришел на сайт 1 января совершит конверсию, то, когда мы выгрузим статистику 3 января за 1 января, то мы увидим, что 1 января по данной рекламной кампании появился расход.

Если вы используете ежедневные выгрузки данных без регулярных алгоритмов проверки данных на достоверность, то в конце месяца статистика в СУБД и источнике данных будет существенно различаться.
Мы реализовали множество механизмов, которые позволяют регулярно проверять достоверность данных и в случае их неполноты незамедлительно начинаем их выгружать.