Системный Блокъ

«Крейсер “Россия”», новый роман Достоевского и другие фантазии ChatGPT

Читали ли вы знаменитый роман Достоевского «Девять пятых»? А «Крейсер “Россия”» Льва Толстого? Мы тоже не читали. А вот ChatGPT знает такие романы и даже может пересказать их сюжет. И это не единственное, о чем безбожно врет самая известная нейросеть нашего времени. Подробный разбор фантазий ChatGPT с участием четырех настоящих (живых, не искусственных) ученых — в блоге Бориса Орехова.

🤖 Как работает ChatGPT?

ChatGPT — это система, построенная на мощной нейронной сети, в основе которой архитектура «трансформер». Суть этой нейронки в том, что она умеет предсказывать следование слов друг за другом, чему она научилась на текстах из интернета. «Словами» при этом могут быть самые разные вещи: от знаков препинания до математической нотации. Чем больше задача, стоящая перед ChatGPT, похожа на языковую, тем лучше нейросеть с ней справляется. А вот работать калькулятором на уровне миллионов-миллиардов у искусственного интеллекта не выходит, потому что такие числа редко встречаются в текстах, а значит, у ChatGPT мало шансов их увидеть и запомнить. Хотя мы привыкли, что машины считают лучше людей, в математике ChatGPT будет допускать ошибки.

📚 А как у неё с литературой?

ChatGPT допускает фактические ошибки даже на уровне школьной программы. Да, она прочла всю Википедию, но фактчекинг после работы нейросети нужен все равно основательный. Льву Толстому она, например, приписывает роман «Крейсер “Россия”», «Ревизора» Гоголя и «Отцов и детей» Тургенева. Достоевский же, согласно нейросети, написал четыре великих романа, один из которых — выдуманный.

🎞️ А как у неё с кино?

Если кратко: главные роли в советском фильме «Любовь и голуби» сыграли Леа Сейдж и Эмили Блант, а лучшую экранизацию «Анны Карениной» в 2017 году снял Кирилл Серебренников (спойлер: нет, он такую не снимал).

🇬🇧 Может, надо просто спросить её по-английски?

Если задавать запросы не на русском, а на английском языке, ChatGPT действительно часто даёт более точные ответы. Правда, если спросить про что-то, что не у всех на слуху, искусственный интеллект может зарапортоваться. В ответ на вопрос о самом известном романе Пелевина нейросеть не только предложила неочевидную «Жизнь насекомых», но и породила при пересказе какой-то странный аналог «Скотного двора» Оруэлла, потому что не знает содержания текстов. В её пересказе «Отцов и детей», кстати, появился старый казак Бердяев, а вот ни Базарова, ни Кирсанова не обнаружилось.

О том, кому СhatGPT приписывает основание компании Yandex, какие проблемы у нейросети возникают на этапе интерпретации текста и владеет ли она специальной терминологией, узнаете из полного текста поста в блоге.

Системный Блокъ

«Крейсер “Россия”» и другие фантазии ChatGPT - Системный Блокъ

Всерьез полагаться на ChatGPT пока не стоит. И вот почему. Доцент школы лингвистики НИУ ВШЭ Борис Орехов разобрался на примерах.

www.group-telegram.com/ar/sysblok.com/593

2.0K viewsMar 20, 2023 at 15:31

«Крейсер “Россия”», новый роман Достоевского и другие фантазии ChatGPT

Читали ли вы знаменитый роман Достоевского «Девять пятых»? А «Крейсер “Россия”» Льва Толстого? Мы тоже не читали. А вот ChatGPT знает такие романы и даже может пересказать их сюжет. И это не единственное, о чем безбожно врет самая известная нейросеть нашего времени. Подробный разбор фантазий ChatGPT с участием четырех настоящих (живых, не искусственных) ученых — в блоге Бориса Орехова.

🤖 Как работает ChatGPT?

ChatGPT — это система, построенная на мощной нейронной сети, в основе которой архитектура «трансформер». Суть этой нейронки в том, что она умеет предсказывать следование слов друг за другом, чему она научилась на текстах из интернета. «Словами» при этом могут быть самые разные вещи: от знаков препинания до математической нотации. Чем больше задача, стоящая перед ChatGPT, похожа на языковую, тем лучше нейросеть с ней справляется. А вот работать калькулятором на уровне миллионов-миллиардов у искусственного интеллекта не выходит, потому что такие числа редко встречаются в текстах, а значит, у ChatGPT мало шансов их увидеть и запомнить. Хотя мы привыкли, что машины считают лучше людей, в математике ChatGPT будет допускать ошибки.

📚 А как у неё с литературой?

ChatGPT допускает фактические ошибки даже на уровне школьной программы. Да, она прочла всю Википедию, но фактчекинг после работы нейросети нужен все равно основательный. Льву Толстому она, например, приписывает роман «Крейсер “Россия”», «Ревизора» Гоголя и «Отцов и детей» Тургенева. Достоевский же, согласно нейросети, написал четыре великих романа, один из которых — выдуманный.

🎞️ А как у неё с кино?

Если кратко: главные роли в советском фильме «Любовь и голуби» сыграли Леа Сейдж и Эмили Блант, а лучшую экранизацию «Анны Карениной» в 2017 году снял Кирилл Серебренников (спойлер: нет, он такую не снимал).

🇬🇧 Может, надо просто спросить её по-английски?

Если задавать запросы не на русском, а на английском языке, ChatGPT действительно часто даёт более точные ответы. Правда, если спросить про что-то, что не у всех на слуху, искусственный интеллект может зарапортоваться. В ответ на вопрос о самом известном романе Пелевина нейросеть не только предложила неочевидную «Жизнь насекомых», но и породила при пересказе какой-то странный аналог «Скотного двора» Оруэлла, потому что не знает содержания текстов. В её пересказе «Отцов и детей», кстати, появился старый казак Бердяев, а вот ни Базарова, ни Кирсанова не обнаружилось.

О том, кому СhatGPT приписывает основание компании Yandex, какие проблемы у нейросети возникают на этапе интерпретации текста и владеет ли она специальной терминологией, узнаете из полного текста поста в блоге.

BY Системный Блокъ