Новость дня: VK Pay представил виртуальную карту с бонусами за покупки

ИИ-модель Microsoft превзошла результат человека в тесте на понимание естественного языка



Алгоритм понимания естественного языка (Natural Language Understanding, NLU) Microsoft DeBERTa превзошел человеческие возможности в одном из самых сложных тестов для подобных алгоритмов SuperGLUE. Об этом говорится в сообщении компании Microsoft.

На данный момент модель занимает первое место в рейтинге с показателем в 90,3, в то время как среднее значение человеческих возможностей составляет 89,8 баллов.

Тест SuperGLUE включает в себя ряд задач, которые разработаны для оценки способности ИИ-моделей распознавать и понимать естественный язык, например, дать правильный ответ на вопрос на базе прочитанного абзаца, определить, правильно ли используется многозначное слово в определенном контексте и т.д. Тест был разработан группой исследователей в 2019 году.

«Для того чтобы добиться текущего результата в 90,3 балла, DeBERTa получила масштабное обновление архитектуры: теперь она состоит из 48 слоев и имеет 1,5 млрд параметров. Microsoft сделает публичной модель и ее исходный код. Кроме того, DeBERTa будет интегрирована в следующую версию Тьюринговой модели Microsoft Turing (Turing NLRv4). Тьюринговые модели используются в таких продуктах Microsoft, как Bing, Office, Dynamics и Azure Cognitive Services, чтобы совершенствовать, к примеру, взаимодействие с чат-ботами, предоставление рекомендаций и ответов на вопросы, поиск, автоматизацию поддержки клиентов, создание контента и решение многих других задач на пользу сотен миллионов пользователей», — говорится в сообщении компании Microsoft.

«Несмотря на то, что модель DeBERTa превзошла человеческие показатели в тесте SuperGLUE, это не означает, что ИИ-модель достигла уровня человека в понимании естественного языка. В отличии от машин, люди хорошо умеют использовать знания, ранее полученные при выполнении различных задач, для решения новых – это называется композиционным обобщением (англ. compositional generalization). Поэтому, несмотря на многообещающие результаты DeBERTa в тесте, необходимо продолжить исследования, для того чтобы развить у модели этот навык», — отмечается в сообщении компании.

Автор: Softodrom.ru
Дата:
Новые статьи: Наука и техника
27.02.2021 22:27

«Ростех» разработал неуязвимый «антидронный» чемоданчик

Используемая мобильным комплексом «Защита» пассивная РЛС не требует разрешения на использование радиочастотных каналов, что облегчает ее применение в гражданской сфере


26.02.2021 19:24

Офицера российской армии осудили за продажу экипировки «солдата будущего»

Экипировка «Ратник» создана по модульной системе и включает в себя различные элементы защиты бойца и повышения его эффективности, в том числе современное оружие и электронные средства связи и разведки


25.01.2021 14:39

Россия отказалась от участия в совместной с США лунной программе

Российская сторона приняла решение не участвовать в программе создания совместной с США космической станции Deep Space Gateway на орбите Луны


22.01.2021 05:45

Вооруженные силы РФ получили первую партию Пенициллина

Первая партия новейших комплексов «Пенициллин» поступила в российскую армию


20.01.2021 16:51

ИИ-модель Microsoft превзошла результат человека в тесте на понимание естественного языка

ИИ-модель Microsoft заняла первое место в рейтинге с показателем в 90,3, в то время как среднее значение человеческих возможностей составляет 89,8 баллов


Популярное: Наука и техника
27.02.2021 22:27

«Ростех» разработал неуязвимый «антидронный» чемоданчик

Используемая мобильным комплексом «Защита» пассивная РЛС не требует разрешения на использование радиочастотных каналов, что облегчает ее применение в гражданской сфере


26.02.2021 19:24

Офицера российской армии осудили за продажу экипировки «солдата будущего»

Экипировка «Ратник» создана по модульной системе и включает в себя различные элементы защиты бойца и повышения его эффективности, в том числе современное оружие и электронные средства связи и разведки


22.11.2019 11:54

Космонавт рассказал, почему россиянки не летают в космос

Последний раз российская женщина-космонавт побывала в орбитальной командировке с сентября 2014 по март 2015 года


08.10.2009 14:21

Необычное облако над Москвой (видео)

В небе над Москвой появилось облако необычной формы


12.03.2010 14:15

Вода из фильтров Грызлова-Петрика, которые «Единая Россия» обещает россиянам, убивает подопытные организмы

Программа «Единой России» «Чистая вода» получила на этот год финансирование в размере 5 миллиардов рублей


» Оставьте первым свой комментарий

Новости /
Наука и техника /
ИИ-модель Microsoft превзошла результат человека в тесте на понимание естественного языка
Все рубрики статей:
Статистика | Рейтинги | Авторам | Реклама
Copyright © 1999-2021 Softodrom.ru
О перепечатках | Рассылки | Пользовательское соглашение | Политика конфиденциальности | О проекте | Карта сайта
Яндекс.Метрика