Время чтения: 1 минута

Искусственный интеллект продемонстрировал отсутствие здравого смысла

ИИ пока не мыслит здраво.

Новый тест для искусственного интеллекта, Winograd Schema Challenge, провален подопытным. Как сообщает IEEE Spectrum, результаты тестирования, которое проводилось в Нью-Йорке (США), показали, что пока ИИ недостаточно здравого смысла.

Для проверки искусственного интеллекта использовался тест, разработанный Гектором Левенски в 2011 году. Профессор информатики из Университета Торонто использовал для создания программы идеи Терри Винограда, который работал над принципами, позволяющими ИИ распознавать живую речь. Эта схема пришла на замену тесту Тьюринга, который подразумевает обмен короткими фразами. Но он все чаще вызывает недоверие со стороны творцов ИИ.

Нововведенная программа тестирования подразумевает использование вопросов с парой ответов, один из которых верный. Каждый вопрос относится к предложению, в котором присутствует 2 имени и 1 местоимение или притяжательное прилагательное, указывающее на определенное из упомянутых имен.

Например, в предложении сказано, что адвокат задал вопрос свидетелю, но он не желает отвечать. Далее спрашивается, кто из них не хочет отвечать, и даны варианты ответа (адвокат/свидетель). Еще один вопрос касается предложения, в котором сказано, что Пит завидует Мерину из-за того, что он успешный. Спрашивается, кто из них успешный — Пит или Мерин? Отвечая на подобные вопросы, человек основывается на смысле фразы. Но ИИ ориентируется на грамматику, при этом грамматически местоимение или притяжательное прилагательное подходит к каждому из двух имен.

Таких вопросов искусственному интеллекту задавалось множество. Поэтому итоговый результат получился достаточно достоверным. Тест проходил в рамках конкурса Лаборатории ИИ и обработки естественного языка в Nuance Communications. В нем участвовали 6 алгоритмов от разных разработчиков. При достижении показателя 90% правильных ответов, создатели программы получили бы 25 тыс. долларов, но призовой фонд так и остался невостребованным. Алгоритм, занявший первое место, набрал немного больше половины требуемого минимума – 48% правильных ответов. Это на 3% превышает результат программы, которая случайно выбирала ответы.

Не факт, что показатели исследования были бы такими, если бы в нем участвовали Google и Facebook. Но член жюри, Гэри Маркус, занимающий пост научного психолога Университета Нью-Йорка, выразил сомнения, насчет преодоления минимального барьера даже алгоритмами таких интернет-гигантов.

Результаты указали на векторы, которых надо придерживаться для развития ИИ. Если искусственный интеллект научится понимать контекст и овладеет осмысленными рассуждениями, то сможет участвовать в естественном диалоге. Это поможет вывести голосовые ассистенты на новый уровень.

Чтобы победить в очередном Winograd Schema Challenge у разработчиков есть еще пара лет, так как проведение очередного конкурса запланировано на 2018 год. Уже известно, что пройдет он в Нью-Орлеане в рамках конференции AAAI.

Мнение Ольги:

Технология машинного обучения находится в самом начале своего развития. Если сравнить ИИ с человеком, то в настоящий момент он является даже не новорожденным младенцем, а эмбрионом. Поэтому требовать от него идеального распознавания смысловых оттенков речи слишком рано. Впрочем, это не значит, что не нужно обучать и совершенствовать искусственный интеллект. И подобные конкурсы являются одним из стимулов для разработчиков.

Оцените статью:
Понравилась 0
Не понравилась 0
Автор: Артём Шаманский / Создатель проекта

Не бояться, уверенно идти вперед, если нужно, то напролом или даже, ломая кости и вгрызаясь в эту жизнь зубами, если это единственный шанс, чтобы жить и чувствовать себя человеком, чтобы испытывать уважение к самому себе и знать, что сделано все, что можно и даже более того ради достижения поставленной цели.

Нам интересно ваше мнение, напишите комментарий:

Нажимая на кнопку «Отправить», я даю согласие на обработку персональных данных в соответствии с «Политикой конфиденциальности».

Обмен мнениями и отзывы о публикации
Подпишитесь на рассылку блог-оптимизатора.рф

Уже подписались 12 человек