Веб-продакшен Далее представляет SubQuery – платформу для работы с большими данными

Компания Далее — один из лидеров заказной веб-разработки в России* — запустила собственный продукт для комплексной работы с большими данными – сервис SubQuery. Решение позволяет быстро и удобно организовать обработку данных компании с помощью фреймворка dbt. Модуль не собирает и не хранит данные, а обрабатывает SQL-запросы напрямую, обеспечивая гибкость и прозрачность аналитических процессов и облегчая нагрузку на СУБД. Решение поддерживает адаптеры для популярных в России СУБД – ClickHouse, PostgreSQL, MySQL, Greenplum и Trino

Ключевое преимущество решения – простота настройки и использования. Dbt-модуль ориентирован на пользователей, знакомых с SQL, но не требует знания Python, SSH, Git, наличия оркестратора (Apache Airflow, Dagster) или владения утилитой crontab. Работа ведётся через встроенный SQL-редактор с подсказками и возможностью персонализации интерфейса. Это позволяет работать на платформе не только data-инженерам, но и профессионалам самых разных профилей: продуктовым и бизнес-аналитикам, специалистам по машинному обучению, маркетологам и исследователям медиа.

«Развёртывание и поддержка dbt внутри компании часто занимают недели и требуют участия DevOps и data-инженеров. Мы создали SubQuery, чтобы dbt могли использовать аналитики и самостоятельно решать большинство задач подготовки данных, ведь всё нужное доступно сразу в облаке без настройки окружений и оркестраторов. Это значительно ускорило работу команд на наших клиентских проектах и сократило time-to-market инсайтов».

Всеволод Миронович

Директор по данным Далее

SubQuery помогает работать как в команде, так и независимо. Пользователю доступны полная история изменений, контроль версий, ветки и публикации. Также реализованы граф моделей, поиск, таргеты, стриминг логов dbt и встроенный файловый менеджер S3. Решение позволяет использовать разные окружения для разработки и продакшна, что помогает в дальнейшем тестировании и разработке.

Предусмотрен функционал для автоматизации: возможен запуск моделей по расписанию и через api, интеграция с корпоративными процессами, уведомления об ошибках и просмотр логов для быстрого выявления проблем.

Dbt-модуль SubQuery доступен частным пользователям и организациям на различных тарифах – от бесплатного до корпоративного с возможностью подключения более 100 пользователей. Больше на сайте SubQuery.

*Согласно рейтингу AdIndex