 |
mybi connect –платформа бизнес-аналитики для автоматизации получения данных и их дальнейшей визуализации. В интерфейсе сервиса возможно увидеть статистические данные только за текущий учетный период. В этой статье мы рассмотрим функционал mybi connect для работы с данными статистики за более длительное время
API mybi connect позволяет получать различные статистические данные.
Для того, чтобы добавить новый источник данных, необходимо в левом боковом меню сервиса mybi connect выбрать пункт “Источники данных” и нажать на кнопку “Добавить новый+”, затем перейти в раздел “ПРОЧЕЕ” и выбрать источник mybi connect, нажав на кнопку “Подключить”:
В открывшейся форме необходимо указать настройки источника:
Поле “Название источника” может быть любым и необходимо для того, чтобы вы могли однозначно идентифицировать этот источник среди других. Если вы хотите выгрузить данные не из текущего аккаунта, то можно указать произвольный ключ доступа в соответствующем поле. Ключ доступа отображается в настройках аккаунта mybi connect при активной опции “API” тарифа пользователя:
Для выгрузки данных статистики из текущего аккаунта активация опции API в тарифе не требуется
После ввода всех необходимых данных необходимо завершить настройку источника, нажав на кнопку “Продолжить”.
Базовая выгрузка
После завершения подключения в таблице “Источники” появится новый источник данных, с указанным в ходе настройки названием. Если вы используете Триал, то автоматически запустится выгрузка данных за 2 последних дня и вы можете сразу перейти к просмотру данных в БД. Далее для запуска исторической загрузки данных за нужный период выберите в колонке “Действия” в строке добавленного источника пункт меню “Загрузить”:
Обратите внимание, что период доступной исторической загрузки зависит от выбранных вами параметров тарифа, а для триального периода составляет 1 месяц.
По завершению загрузки в базе данных появятся сведения по заявкам в специально спроектированном нами виде, наиболее удобном для дальнейшего анализа:
Более детально ознакомиться со структурой выгрузки вы можете здесь.
Если в каких-то из этих данных вы не нуждаетесь, можно воспользоваться функционалом по выбору необходимых таблиц и выбрать только те, в которые будут загружаться данные в процессе базовой выгрузки:
Это позволит вам как ограничить набор данных, так и в какой-то мере сэкономить количество расходуемых на выгрузку строк.
Кроме возможности выбора таблиц, в базовой выгрузке также существует функционал фильтрации, позволяющий ограничить данные, загружаемые в те или иные таблицы. Вот пример использования фильтра:
Этот фильтр позволяет хранить в БД только записи по активным источникам.
Пользовательская выгрузка
Пользовательская выгрузка позволяет организовать загрузку произвольного набора полей с последующем автоматическим обновлением по текущий период. Необходимым условием создания выгрузки является наличие настроенного источника. Для ее создания необходимо перейти в раздел “Планировщик заданий“, нажать на кнопку “Добавить новое+” и выбрать из списка “Выгрузка отчетов из mybi connect”. Далее вы попадете на форму с параметрами выгрузки:
В ней необходимо задать имя отчета, выбрать источник mybi connect, тип отчета, сформировать список необходимых полей, указать параметры обновления данных. По умолчанию загружаемые данные сохраняются в таблицу connect_reports в формате JSON.
Воспользовавшись опцией “Зафиксировать структуру” в поле “Описание таблиц” можно добавить специальное правило, описывающее, каким образом полученные сведения должны обрабатываться mybi connect. Это даст возможность пользователю сохранять данные в удобном виде и в указанных таблицах. Для завершения настройки отчета необходимо нажать на кнопку “Продолжить”.
Добавив отчет в список заданий, его можно запустить для загрузки данных, это можно сделать отобразив меню “Выбрать” в колонке “Действия” напротив созданного отчета и выбрав пункт меню “Выполнить”:
После указания периода загрузки данные будут загружены в хранилище.
Сверка загруженных данных
Задание “Проверка загруженных данных” позволяет выявить наличие расхождений между имеющимися сведениями в базе данных и сервисе-источнике (в данном случае mybi connect), а также актуализировать состояние загруженных данных за прошлые периоды в случае выявления расхождений.
При выявлении отклонений используется следующий набор параметров и показателей для сравнения:
- добавлено строк;
- обновлено строк;
- удалено строк.
Результаты проверки загруженных данных вы можете найти в журнале событий (колонка “Действия” -> Журнал событий -> Сверка).
Удаление устаревших данных
Учитывая объем накапливаемых данных, а также наличие зависимости максимального объема хранимых данных от параметров тарифного плана, в некоторых случаях можно воспользоваться дополнительным заданием “Удаление устаревших данных“. Это задание позволяет удалять данные из хранилища, длительность хранения которых превышает количество дней указанных при настройки задания. Для того чтобы создать задание для удаления устаревших данных необходимо перейти в раздел “Планировщик заданий” и нажать на кнопку “Добавить новое+”, в появившемся выпадающем списке необходимо выбрать “Удаление устаревших данных”, далее будет отображена форма с параметрами задания:
Необходимо указать название задания, количество дней, при превышении которых данные считаются устаревшими, а также выбрать источник данных, завершив настройку задания нажатием кнопки “Продолжить”. После этого в таблице “Задания” появится новое задание, запуск которого будет осуществляться каждую ночь после базовой загрузки.
Мы будем рады вашим вопросам и рациональным комментариям относительно функционала сервиса в чате нашего телеграм-канала @mybi connect