Российская экосистема BI-решений продолжает стремительно развиваться. Еще одним признаком систематизации и роста рынка стала публикация очередного исследования Сергея Громова и группы BIConsult в области ETL-инструментария. Специалисты изучили доступные в России утилиты для извлечения и подготовки данных и подготовили подробное описание каждой из них.
«ETL (Extraction, Transformation, Loading) — важнейшая часть экосистемы работы с данными. Без возможности получить данные из широкого спектра источников, а также без их проверки и очистки невозможно говорить о качественной аналитике, — отмечает Алексей Никитин, генеральный директор Visiology. — При разработке нашей платформы мы изначально избегали привязки пользователей к конкретным инструментариям ETL, и благодаря этому сегодня Visiology предлагает наиболее широкий выбор утилит для загрузки и трансформации данных».
Круг Громова, посвященный ETL-инструментам, включает в себя несколько разделов — непосредственно утилиты для сбора и проверки данных, коннекторы к популярным платформам, а также дополнительные инструменты для трансформации данных. И хотя количество средств извлечения данных не так велико по сравнению с количеством российских BI-плвтформ, в каждой из категорий присутствует одно или несколько решений, уже интегрированных с платформой Visiology.
Так, в числе ETL-инструментов аналитиками был отмечен Vixtract — open-source система на базе Jupyter Hub, разработанная инженерами Visiology. Благодаря полной открытости и гибкости Vixtract подходит для решения различных задач, а любой дополнительный функционал можно реализовать на Python.
Второй инструмент, для которого Visiology является одной из целевых систем подготовки данных — это low-code платформа Loginom. Отличная российская разработка с многолетней историей предлагает графический интерфейс для подготовки моделей и расширенные возможности по подготовке и очистке данных. ПО внесено в «Реестр российского ПО» и поэтому может использоваться вместе с Visiology на проектах с высокими требованиями к импортозамещению.
Из числа коннекторов Visiology успешно работает с продуктами ATK BIView для подключения к 1С. Данная связка была использована на целом ряде проектов и позволяет использовать информацию, накопленную в базах данных 1С для бизнес-аналитики.
Сложные инструменты, которые обеспечивают трансформацию данных и ооганизацию моделей, также используют Visiology в качестве одного из вариантов финальной загрузки информации. Так Super Star Data Model (SSDM) помогает организовать данные в «звезду» и в результате в дальнейшем использовать любые ETL и BI-платформы, но в качестве образца для загрузки создатели уникального инструмента используют Visiology.
Сравнить характеристики российских и открытых ETL-инструментов и коннекторов вы можете, прочитав исследование Круг Громова. Документ доступен для загрузки на сайте BICousult.
