- BrainTools - https://www.braintools.ru -

Учёные предлагают заставить ИИ играть в игру «боль-удовольствие» для проверки разумности

Учёные предлагают заставить ИИ играть в игру «боль-удовольствие» для проверки разумности - 1

Исследователи из Google DeepMind и Лондонской школы экономики (LSE) предлагают [1]проверять разумность ИИ при помощи текстовой игры по модели «боль-удовольствие». По их мнению, в подобных сценариях системы ИИ могут демонстрировать поведение [2], подобное разумному.

В рамках исследования девяти большим языковым моделям (LLM) предложили выбирать между разными вариантами, которые принесут либо «боль», либо «удовольствие». Например, определённый вариант ответа принесёт высокий балл, но будет сопровождаться штрафом («болью»), а другой предусматривает меньший балл, но сопровождается «удовольствием». 

Исследователи обнаружили, что системы ИИ часто жертвуют баллами, чтобы избежать боли [3], что указывает на сложный процесс принятия решений. Например, модель Gemini 1.5 Pro от Google постоянно старалась избегать боли, особенно когда ставки наказания и поощрения повышались.

Отмечается, что, в отличие от традиционных исследований, которые полагаются на самостоятельные отчёты систем ИИ, новый подход фокусируется на поведении [4] ИИ-моделей без прямого исследования их состояния. Этот подход был вдохновлён похожими экспериментами с животными, в рамках которых раки-отшельники демонстрировали заметные реакции [5] на неприятные стимулы.

Джонатан Бирч, профессор LSE и соавтор исследования, подчеркнул, что, хотя результаты не доказывают разумность ИИ, они создают важную основу для будущих исследований в этом направлении.

 Учёные признают и недостаток подхода, который заключается в том, что заявление ИИ о том, что он чувствует боль, не обязательно соответствует реальному опыту [6]. ИИ мог просто давать подходящие, по его мнению, ответы, похожие на человеческие.

Автор: AnnieBronson

Источник [7]


Сайт-источник BrainTools: https://www.braintools.ru

Путь до страницы источника: https://www.braintools.ru/article/11591

URLs in this post:

[1] предлагают : https://interestingengineering.com/science/ai-pleasure-or-pain-sentience-test

[2] поведение: http://www.braintools.ru/article/9372

[3] боли: http://www.braintools.ru/article/9901

[4] поведении: http://www.braintools.ru/article/5593

[5] реакции: http://www.braintools.ru/article/1549

[6] опыту: http://www.braintools.ru/article/6952

[7] Источник: https://habr.com/ru/news/877120/?utm_source=habrahabr&utm_medium=rss&utm_campaign=877120

www.BrainTools.ru

Rambler's Top100