Пресс-релизы // » Добавить пресс-релиз

Исследование Axenix: инструменты китайских вендоров для анализа больших данных оказались производительнее решений на базе open source

В России с 2022 года происходит активная трансформация рынка систем класса DWH (Data Warehouse, системы хранилищ данных). Компании энтерпрайз-сегмента реализуют проекты по миграции своих хранилищ данных на отечественные продукты, однако выбор доступных технологий сильно ограничен. На российском рынке сейчас преобладают решения, построенные на базе open source продуктов. Наиболее распространенные — различные сборки российских вендоров на базе Greenplum и Clickhouse. Также активно развивается архитектура Lakehouse, в основе которой часто лежат такие решения как Impala, Trino, Spark.

Массово-параллельная аналитическая СУБД Greenplum часто используется российскими заказчиками благодаря сравнительно простой архитектуре и тому, что она основана на широко распространённой СУБД PostgreSQL. Это делает её удобной для внедрения и сопровождения. Однако у этой технологии есть серьезные ограничения, которые не позволяют покрыть все требования российских компаний.

В этой ситуации компания Axenix решила провести исследование рынка китайского ПО, используемого для создания систем класса DWH и сравнить функциональность и производительность этих продуктов, с продуктами, используемыми на российском рынке.

При выборе СУБД и платформ для анализа больших данных российские команды разработчиков часто не имеют возможности оценить реальную производительность решений — тестирование проводится на ограниченном числе задач или в рамках узких кейсов. Поведение системы при масштабировании на реальном проекте нередко становится неожиданностью. В связи с этим команда Axenix провела нагрузочное тестирование функциональности выполнения аналитических запросов.

В тестирование были включены решения китайских вендоров Transwarp и YMatrix, а также наиболее популярные решения на базе open source: Greenplum, Trino и Apache Spark. Продукты китайских вендоров (Transwarp и YMatrix) продемонстрировали более высокую производительность по сравнению с популярными на рынке open source-инструментами.

«СУБД и платформы для обработки и аналитики данных — ключевые элементы в нашей практике Applied Intelligence. На их основе создаются корпоративные хранилища данных, их возможности учитываются при создании различных сервисов, которые эти данные используют. Расширенное тестирование решений от китайских вендоров позволило нам определить круг надёжных продуктов, способных не только эффективно обрабатывать десятки и сотни терабайт данных, но и выдерживать высокую конкурентную нагрузку в режиме близком к реальному времени», — прокомментировала Татьяна Кириленко, руководитель направления «Инженерия и архитектура данных» Axenix.

Результаты тестирования показали, что китайские решения превосходят Greenplum по производительности — в большинстве сценариев разница достигает кратных значений.

В ходе тестирования специалисты Axenix пришли к следующим выводам:

● Transwarp показал наивысшую производительность, сбалансированную стоимость и возможность сохранения логики приложений при миграции с Oracle и Teradata. Платформа также характеризуется зрелой экосистемой и высоким уровнем стабильности.

● YMatrix занял второе место по производительности. Решение развивается как совместимое с Greenplum, но имеет ряд улучшений, включая оптимизацию исполнения запросов и встроенные механизмы интеграции с потоковыми и другими источниками данных.

● Greenplum — зрелая и надёжная платформа для построения корпоративных хранилищ данных. Несмотря на богатый функционал, архитектура Greenplum не в полной мере использует потенциал современных аппаратных решений, что может ограничивать её производительность в ряде сценариев. В ходе тестирования она продемонстрировала наименьшую производительность среди всех участников.

● Trino — высокопроизводительный SQL-движок, ориентированный на выполнение интерактивных запросов к данным, находящимся в различных хранилищах. Он легко устанавливается, масштабируется и не требует переноса данных — работает «поверх» существующих источников. Trino не является СУБД в классическом смысле и не хранит данные самостоятельно.

● Apache Spark — мощная платформа для распределённой обработки больших объёмов данных, включая потоковые и пакетные сценарии. Spark поддерживает SQL через модуль Spark SQL, а также более гибкие модели работы с данными, такие как DataFrame. Несмотря на универсальность, Spark показал меньшую производительность в интерактивных запросах по сравнению с Trino, что объясняется особенностями архитектуры.

Все протестированные решения показали стабильную работу при обработке больших объемов данных и различную степень масштабируемости и эластичности.

«Результаты тестирования продуктов китайских вендоров показали, что они могут превосходить по эффективности популярные open source-решения. Transwarp, YMatrix и Trino продемонстрировали отличное быстродействие и могут быть успешно применены в проектах создания корпоративных хранилищ данных», — отметил Андрей Михайлов, руководитель команды разработки хранилищ данных Axenix.

Для тестирования использовался стандартный бенчмарк TPC-DS (Transaction Processing Performance Council - Decision Support), предназначенный для оценки производительности аналитических СУБД. Он включает разнообразные сценарии и запросы, позволяет генерировать синтетические данные в нужных объёмах и обеспечивает сопоставимость результатов.

Тестирование проводилось на единых ресурсах, развернутых в облаке российского провайдера: использовались виртуальные машины с 16 vCPU, 64 ГБ оперативной памяти и быстрым SSD-хранилищем.

О компании Axenix
Российская компания Axenix (ранее Accenture) осуществляет деятельность под юридическим наименованием ООО «АксТим». Axenix предоставляет широкий спектр профессиональных услуг в области цифровых сервисов, облачных технологий и решений для обеспечения информационной безопасности. В офисах и центрах разработки в Москве, Твери, Ростове-на-Дону, Краснодаре, Санкт-Петербурге и Алматы работают около 2 000 сотрудников. Благодаря сочетанию уникальных знаний, опыта и компетенций более чем в 40 отраслях, предлагает услуги в области стратегии и бизнес-консалтинга, технологических решений и других операций, направленных на цифровизацию бизнеса.

Контактное лицо: Татьяна Алексеева
Компания: Axenix
Добавлен: 13:17, 16.04.2025 Количество просмотров: 282
Страна: Россия


Студентка Уральского государственного аграрного университета покорила Первенство России U23, ФГБОУ ВО Уральский ГАУ, 15:16, 30.07.2025, Россия47
Студентка Уральского ГАУ покорила Первенство России U23 и побила рекорд Свердловской области, который продержался 18 лет.


«1С-Рарус» выпустил сервис «DOC4B-ПЭП» для безбумажного подписания документов с физлицами в автобизнесе, 1С-Рарус, 15:09, 30.07.2025, Россия46
Сервис от «1С-Рарус» позволяет подписывать документы с физическими лицами всего за 1 минуту, используя уникальный код из SMS. Готовый модуль расширения стал доступен пользователям КОРП-версий программ «Альфа-Авто, ред. 6». Для знакомства с сервисом предоставляется возможность бесплатно подписать до 10 тестовых документов.


К2Тех и Knomary совместно улучшают решение для автоматизации HR- и бизнес-процессов, "Группа Астра", 13:39, 30.07.2025, Россия66
В портфель решений К2Тех вошла система «Целеполагание», разработанная для автоматизации процессов постановки, контроля и анализа целей в организациях. Теперь клиенты К2Тех смогут оптимизировать рутинные действия, что позволит сделать бизнес-процессы прозрачнее и с помощью внедренного в систему ИИ — уменьшить вероятность связанных с человеческим фактором ошибок.


ЭОС анонсирует выход нового кроссплатформенного приложения EOSmobile, ЭОС, 13:38, 30.07.2025, Россия81
Компания «Электронные Офисные Системы» завершает тестирование новой версии мобильного приложения EOSmobile для работы в системе электронного документооборота.


«1С-Рарус» создал систему управления производственными проектами в «Юнител Инжиниринг», 1С-Рарус, 13:31, 30.07.2025, Россия77
«1С-Рарус» завершил проект перевода ведущего производителя электротехнического оборудования в единую систему на базе «1С:ERP Управление предприятием» и «1С:Зарплата и управление персоналом КОРП». В результате внедрения новых механизмов планирования и учета на 20% ускорено формирование управленческой отчетности. Усилен контроль выполнения производственных проектов.


Основательница международной школы CODDY Оксана Селендеева вступила в Гильдию маркетологов России, CODDY, 13:31, 30.07.2025, Россия73
Оксана Селендеева, основатель и генеральный директор международной школы программирования CODDY, официально стала членом Гильдии маркетологов России. Это престижное профессиональное сообщество объединяет ведущих экспертов и практиков маркетинга по всей стране.


В Санкт-Петербурге обсудили внедрение ИИ в разработку и оптимальные корпоративные архитектуры, Axenix, 13:31, 30.07.2025, Россия71
24 июля в Санкт-Петербурге состоялась профессиональная технологическая конференция компании Axenix из серии AXENIX.PRO IT.


Utrace запускает услугу по валидации IT-систем для фармацевтического рынка, Utrace, 13:31, 30.07.2025, Россия75
Utrace, российский разработчик решений для управления цифровой маркировкой, объявил о запуске услуги по валидации критически важных ИТ-систем.


HRlink упростил контроль за сроками подписания кадровых документов, HRlink, 13:31, 30.07.2025, Россия67
Один из лидеров рынка HR Tech – компания HRlink – расширил функциональность своего флагманского продукта – одноименного сервиса кадрового ЭДО.


Платформа для нормализации данных EstiOne внесена в реестр программ для ЭВМ, ДатаРу, 13:30, 30.07.2025, Россия65
Решение по автоматической нормализации данных EstiOne, разработанное компанией «DатаРу Консалтинг», получило регистрацию в государственном реестре программ для ЭВМ. Регистрация подтверждает оригинальность технологии и открывает новые возможности для клиентов.


АРМЕТ и Animation School объявили о сотрудничестве, АРМЕТ, 09:52, 30.07.2025, Россия87
Ассоциация участников рынка метавселенных (АРМЕТ) и Animation School объявили о стратегическом партнерстве в рамках подготовки одного из крупнейших событий индустрии анимации в России – Международным Слёт аниматоров, который проводится при поддержке Президентского фонда культурных инициатив.


Клиентам УМАРТА стала доступна платформа Smart Monitor, VolgaBlob, 09:52, 30.07.2025, Россия85
Российские ИТ-компании УМАРТА и VolgaBlob заключили стратегическое партнерство. УМАРТА займется поставкой и внедрением платформы мониторинга и анализа данных Smart Monitor, разработанной VolgaBlob. В перспективе в компании планируют создание партнерских аналитических модулей для Smart Monitor.


13 новых программ бакалавриата запускает ИТ-холдинг Т1 в партнерстве с ведущими вузами страны, ИТ-холдинг Т1, 09:50, 30.07.2025, Россия79
К 2030 году более 10 тысяч российских студентов пройдут обучение по прикладным программам, разработанным российскими ИТ-компаниями, в числе которых ИТ-холдинг Т1


«АльтерОфис» от «АЛМИ Партнер» получил сертификат ФСТЭК, ALMI Partner, 09:50, 30.07.2025, Россия86
Сертификационные испытания подтвердили, что пакет офисных приложений отвечает государственным требованиям по защите информации. Ему присвоен четвертый уровень доверия.


MONT включил в продуктовую линейку платформы BAS Felix и APT Bezdna от CTRLHACK, MONT, 09:48, 30.07.2025, Россия71
Группа компаний MONT заключила партнёрское соглашение с российской компанией CTRLHACK — командой экспертов в области offensive security.


  © 2003-2025 inthepress.ru