Математики РУДН и Свободного университета Берлина предложили новый способ использования нейронных сетей для работы с зашумленными данными больших размерностей

Математики РУДН и Свободного университета Берлина предложили новый способ использования нейронных сетей для работы с зашумленными данными больших размерностей

Математики РУДН и Свободного университета г. Берлина предложили новый подход к изучению распределений вероятностей наблюдаемых данных с помощью искусственных нейронных сетей. Новый подход лучше взаимодействует с так называемыми выбросами — с теми объектами входных данных, которые значительно выделяются из общей выборки.

Восстановление распределения вероятностей наблюдаемых данных искусственными нейронными сетями — это наиболее важная часть машинного обучения. Распределение вероятностей не только позволяет прогнозировать поведение исследуемой системы, но и количественно оценить неопределенность, с которой делаются прогнозы. Главная трудность заключается в том, что, как правило, наблюдаются лишь сами данные, но их вероятностные распределения в точном виде не доступны. Для решения этой проблемы используют байесовские и близкие к ним приближенные методы. Но их использование увеличивает сложность нейронной сети и соответственно ее обучения.

Математики РУДН и Свободного университета г. Берлина использовали детерминированные веса для нейронных сетей, а выходами сетей закодировали распределения латентных переменных для искомого маргинального (частного) распределения. Анализ динамики обучения таких сетей позволил им получить формулу, которая корректно оценивает дисперсию распределения наблюдаемых данных, несмотря на наличие в данных выбросов. Предложенную модель проверили на разных данных: синтетических и реальных. Новый метод позволяет восстанавливать распределения вероятностей с более высокой точностью по сравнению с другими современными методами. Точность оценивалась по методу AUC (area under the curve — это площадь под графиком, который позволяет оценить среднеквадратичную ошибку предсказаний в зависимости от размера выборки, оцененной сетью как «надежная»; чем выше оценка AUC, тем качественнее предсказания).

Статья опубликована в журнале Artificial Intelligence.

Новости
Все новости
Наука
4 февраля
Устойчивость микромира Арктики: учёные РУДН исследуют, как спасти почвы от нефти и тяжелых металлов

Арктика — регион стратегического значения, обладающий уникальной и уязвимой природой. Интенсивное освоение его ресурсов обнажило серьёзную проблему: низкую устойчивость экосистем к воздействию человека. Хроническое загрязнение нефтепродуктами и тяжёлыми металлами наносит долгосрочный ущерб, а механизмы естественного восстановления почв в суровых климатических условиях изучены недостаточно.

Наука
29 января
«Живой тест воды»: учёный РУДН создаёт новую систему экомониторинга с помощью ИИ и рыбок Danio rerio

Кандидат биологических наук, доцент института экологии РУДН Всеволод Павшинцев разрабатывает инновационную методику, которая позволяет оценивать состояние пресных водоёмов с помощью рыбок данио-рерио и искусственного интеллекта. Проект, поддержанный грантом университета, призван перейти от простого химического анализа воды к пониманию того, как загрязнители воздействуют на живые организмы.

Наука
29 января
«Идеальный» дентальный имплантат: доцент инженерной академии РУДН рассказала о своей разработке

Доцент кафедры наноэлектроники и микросистемной техники РУДН Екатерина Гостева возглавляет междисциплинарный проект по разработке технологии наноструктурирования поверхности имплантатов. Её цель — сделать приживление имплантатов быстрым, надёжным и доступным для самых разных групп пациентов.