Миссия «Алгоритм для Сбербанка»: команда DD Planet стала победителем конкурса «Цифровой прорыв»
7 июня 2020 года завершился первый онлайн-хакатон конкурса «Цифровой прорыв». Команда digital-интегратора DD Planet заняла 1-е место в кейсе анализа геоданных от Ассоциации больших данных и Сбербанка.
Источник фото на тизере: Jesse Echevarria on Unsplash
В этом году хакатон проходил в онлайн-формате, в нём приняли участие 250 команд из разных регионов России. Команда разработчиков DD Planet совместно с выпускниками ТулГУ выступила под названием «Фирмачи» во главе с ведущим программистом Юрием Басаловым. В течение 36 часов участники хакатона решали кейсы от ведущих IT-компаний, стартапов и региональных ведомств.
В задании Ассоциации больших данных и Сбербанка командам требовалось разработать интеллектуальную систему предобработки почтовых адресов, не подвергающуюся разложению существующим Нормализатором банка. Результатом предложенного решения должен был стать алгоритм, корректирующий адрес так, чтобы он успешно обрабатывался Нормализатором банка.
Команда «Фирмачи» представила решение, которое позволяет структурировать адреса, убирает лишние знаки препинания, не значащие или мешающие распознаванию блоки и приводит адрес к стандартному виду. Алгоритм основан на выявленных с помощью статистического анализа плохих и хороших адресах и позволяет компаниям с большой базой данных быстро их актуализировать. Решение является автоматическим, что обеспечивает минимум вложений для его поддержки.
Юрий Басалов, ведущий программист DD Planet: «В ходе разработки алгоритма мы столкнулись с проблемой — не могли проверять своё решение на Нормализаторе Сбербанка. Поэтому наша команда создала классификационную модель, которая с точностью более 98% определяет, распознаёт Нормализатор адрес или нет. Благодаря статистическому анализу мы определили блоки адреса, которые „ломают“ Нормализатор. Их мы удаляли или преобразовывали. Такой подход позволил нам получить более 67% распознанных плохих адресов с минимальной потерей информации. Мы сразу адаптировали своё решение к высоким нагрузкам, реализовав его на Java + Apache Spark».
Эффективная и выгодная реклама с сервисом от МегаФона
Широкий выбор рекламных каналов, более 100 параметров по интересам, подробная аналитика и другие возможности уже ждут в Личном кабинете. А еще кешбэк 100% за запуск рекламы в первый месяц и еще 10% — каждый месяц.