Недавно сразу несколько клиентов «Маскировщика» заявили, что переходят на GreenPlum. Мы изучили возможности работы с этой СУБД и обнаружили, что при многонодовой архитектуре загрузка по стандарту JDBC не дает ожидаемой производительности.
При работе в кластере GreenPlum вставка по JDBC идет крайне медленно. Чтобы решить эту проблему, разработчики СУБД предлагают несколько вариантов оптимизации для нагруженных потоков данных. Мы выбрали оптимальный и усовершенствовали сценарий обработки данных на своей стороне.
В результате скорость загрузки данных выросла в 20 раз по сравнению с работой по JDBC напрямую. После внедрения у заказчиков расскажем, как система ведет себя в реальных сценариях, какие плюсы и минусы есть у работы по выбранному пути.
Напомним, что «Маскировщик» уже успешно работает с Oracle, PostrgeSQL и MSSQL. Именно эти СУБД чаще всего используют наши клиенты. Также «Маскировщик» совместим и с менее распространенными базами данных, в том числе MySql, SAP HANA, MariaDB. Сейчас разрабатываем дополнительные коннекторы под новые сценарии — так мы адаптируем продукт для более широкого охвата источников у наших клиентов.
