В Новосибирске специалисты усовершенствовали программное обеспечение с открытым исходным кодом, применяемое крупными корпорациями по всему миру для хранения больших объемов данных. Модификация позволяет ускорить процесс записи данных в два-четыре раза, что особенно важно для обработки информации с датчиков автомобилей и умных устройств.
Речь идет о платформе Apache Hudi, которая относится к классу Lakehouse и предназначена для хранения, обработки и анализа массивных объемов данных. Такие системы оперативно обрабатывают телеметрию с миллионов устройств, включая умные бытовые приборы и автомобили. Разработчиком модификации стал выпускник факультета информационных технологий Новосибирского государственного университета (НГУ) Марк Бухнер. Его доработанный код прошел международную проверку и был включен в официальные версии программы.
«Наша цель – ускорить запись данных в крупные базы, которые содержат терабайты информации», – поясняет Бухнер.
Современные автомобили, особенно электромобили и гибриды, оборудованы множеством датчиков, которые постоянно передают данные о состоянии систем производителю. Когда таких автомобилей миллионы, компаниям необходимо мгновенно обрабатывать эти потоки информации, чтобы быстро выявлять неисправности и обучать искусственный интеллект для улучшения сервиса. Подобные задачи актуальны не только в автомобильной промышленности, но и в других отраслях, таких как энергетика, логистика и производство.
Особенностью программного обеспечения с открытым исходным кодом является его доступность для любого бизнеса, поскольку оно не принадлежит одной корпорации. После обновления ПО компании по всему миру автоматически получают значительное увеличение скорости работы с данными, которое может достигать двух-четырехкратного ускорения в зависимости от конфигурации системы.
На данный момент платформа активно используется на азиатском рынке. По мнению автора разработки, в будущем высокоскоростные системы станут необходимыми и для российских компаний, особенно с учетом роста числа подключенных к сети устройств.
Источник: ТАСС
распечатать статью
