19-20 апреля в научной библиотеке ИГУ прошел традиционный весенний хакатон, организованный факультетом бизнес-коммуникаций и информатики (ФБКИ) при поддержке Samsung Innovation Campus по направлениям совместных программ.
В этом учебном году на ФБКИ открыта новая магистратура «Большие данные и интеллектуальные системы». В её состав входит дисциплина «Технологии организации и управления инфраструктурой больших данных», разработанная совместно с Samsung Innovation Campus. В современных корпоративных системах зачастую объёмы данных достигают такого размера, что обработать на одном сервере их невозможно, поэтому для их обработки и анализа разработаны специальные программные решения, такие как Apache Hadoop или Spark.
Поэтому тематикой хакатона стали большие данные по задачам индустриальных партнёров: Arenadata и VK Tech. В состязании участвовали 8 команд ИГУ и ИРНИТУ, всего 23 человека.
Андрей Лимасов, куратор образовательных программ Samsung Innovation Campus:
Впервые к организации подключились технологические компании, что говорит о востребованности тематики хакатона.
Компанией Arenadata была предложена задача определения злоумышленника по паттерну передачи данных на сетевом оборудовании, для чего требовалось провести анализ сетевой активности, выявить аномалии и составить список пользователей оператора связи с подозрительным поведением.
Принципиально другая задача была предложена VK Tech, посвящённая оптимизации запросов к данным. Каждой команде был выделен персональный вычислительный кластер, на котором хранилось более миллиарда записей. Требовалось улучшить производительность 22 запросов к этому набору данных. Среди гипотез команд были: оптимизировать синтаксис запросов, выделить и сохранить отдельно агрегатные данные, выполнить денормализацию структуры базы данных, провести партиционирование таблиц.
Свои решения задач команды представили жюри экспертов, в которое вошли специалисты из отрасли: Андрей Лимасов – куратор образовательных программ Samsung Innovation Campus, Александр Воловиков – ведущий инженер-программист компании IT_ONE, Станислав Григорьев – доцент ИРНИТУ, региональный эксперт АСИ в конкурсе цифровых решений World AI & Data Challenge, Виктория Попова – преподаватель ИМИТ ИГУ, инженер-программист в ООО «Медицинские решения», Клим Митрофанов – специалист Huawei Russian Research Institute.
Победители:
I место – KT315, ФБКИ ИГУ: Владислав Новиков, Егор Приставка, Александр Попов,
II место – Big data Still Matters, ИРНИТУ: Ярослав Поляков, Пётр Андреев, Егор Климчик,
III место – S3, ФБКИ ИГУ: Андрей Горохов, Екатерина Коржова, Бато Дондоков.
Участники получили памятные сувениры от компаний Arenadata и VK Tech.
Хакатон был проведён при поддержке образовательного проекта «Академия ИТ» от групп компаний Эн+, направленного на подготовку IT-специалистов.