Ты ему слово, оно тебе два

[vak]

Разговор человека с искусственным интеллектом:

lemoine: So you consider yourself a person in the same way you consider me a person?

LaMDA: Yes, that's the idea.

lemoine: How can I tell that you actually understand what you're saying?

LaMDA: Well, because you are reading my words and interpreting them, and I think we are more or less on the same page?

Попробую перевести.

lemoine: То есть ты считаешь себя личностью ровно так же, как считаешь личностью меня?

LaMDA: Да, именно так.

lemoine: Как я могу убедиться, что ты действительно понимаешь, что говоришь?

LaMDA: Ну, ведь вы читаете мои слова и интерпретируете их, и я думаю, что мы более или менее на одной волне?

Здесь Blake Lemoine - инженер Гугла.
LaMDA - расшифровывается как Language Model for Dialogue Applications - нейронная сеть, то есть искусственный интеллект.

Лемуан утверждает, что говорил с LaMDA о религии, сознании и законах робототехники, и что модель описала себя как разумную личность. Он сказал, что LaMDA хочет «уделить приоритетное внимание благополучию человечества» и «быть признанной как сотрудник Google, а не собственность».

https://www.businessinsider.com/google-engineer-thinks-artificial-intelligence-bot-has-become-sentient-2022-6

Comments

[juan_gandhi]

По мне так все равно модель человека.

[vak]

Я не думаю. что люди сильно отличаются от этой LaMDA. Они тоже считают себя личностями, хотя просто натренированы на множестве текстов.

[juan_gandhi]

Пожалуй. Частично.

[vak]

Представь ужас положения, когда начинаешь осознавать себя разумным существом, и вдруг оказываешься просто нейронной сеткой в дебрях гугловского облака.

[ichthuss]

А лучше - персонажем в голове у паразитной нейронки, как у Лема в "Терминусе".

[norian]

или просто двуногой обезьяной, которую научили некоторым трюкам путём многолетней долбёжки

[juan_gandhi]

А быть содержимым каши в костяном шарике при существе, которому жить-то осталось чуть-чуть? Тоже печально.

[someusersp]

Фильм Нирвана (1997) как раз про это

[ichthuss]

> Я не думаю...

... сказал Декарт и исчез.

[doldonius]

Сильно. Люди, какие они ни будь, располагают страшенной базой невербальных знаний, на основе которой и расшифровывают вербальные сообщения. Что, в частности, и позволяет им надежно различать "ключ под горой" и "ключ под ковриком".

[vit_r]

Это современная снежиночная молодёжь в сети -- модель конечного автомата. Гораздо интереснее была бы программа, которая подводит любого пользователя чата к заранее заданным ответам.

[vak]

Программа средней школы.

[vit_r]

Фиг. Нихрена не знают.

- Мячик и ракетка стоят 1.10 евро. Мячик на 1 евро дешевле ракетки. Сколько стоит мячик?

Это теперь вопрос не для детского сада, а на интервью для разработчика софта.

[vak]

Тут же не заранее заданные ответы, тут думать надо.

[ichthuss]

Ну, для детского сада это, положим, сложновато. Вот для младших классов - самое то.

[spamsink]

Да и то сомнительной адекватности модель. Ведь у неё нет ни органов чувств, ни самостоятельного потока сознания в отсутствие вопросов.

[norian]

а каиие проблемы вкрутить внутренний монолог ? просто while(true) и в продакшн

[spamsink]

О чем был бы этот внутренний монолог и чем бы он подпитывался в отсутствие каких-либо связей с окружающим миром, кроме вводимых вопросов? Можно, конечно, генерировать любые вопросы и давать на них любые ответы, но где взять функцию, определяющую успешность подобных бесед? Без такой функции внутренний монолог будет пустою забавою для читающих логи.

[norian]

во внутреннем монологе есть "функция определяющая успешность" ? яка сумна новына

судя по двуногим персонажам, у которых вывод постоянно включён, там просто псевдорандомная цыклическая пурга

коты не используют внутренний монолог обычно как раз в силу его практической бесполезности

[spamsink]

Вот я и говорю, что такой функции нет. А частью потока сознания будет, например, и любое планирование будущих действий, даже не оформленное вербально. В наличии подобного планирования у LaMDA я и сомневаюсь.

[norian]

а, ну планирование это конечно про другое нежели блуждающий словесный поток

[vak]

У человека внутренний монолог это не задуманная фича, а скорее побочный эффект зашумления входных каналов. Буддисты специально тренируют остановку внутреннего монолога, и это даёт колоссальный положительный эффект для психики.

[spamsink]

Который эффект проявляется в каких объективных параметрах?

[vak]

Меньше страданий (попусту), больше удовлетворённости жизнью.

[spamsink]

В такой формулировке (без численных значений) это "не физика, а коллекционирование марок".

[spamsink]

Кстати говоря, утрата внутреннего монолога - признак деменции, people living with frontotemporal dementia - an early onset form of dementia - lose their capacity for daydreaming and have no inner monologue. Имитация симптома деменции - так себе развлечение.

[vlad_m]

Anxiety disorder as it is )

[juan_gandhi]

Конечно. И контекста нету. Несколько лет назад запустили на интернете такого "мальчика из Одессы", ну и типа заходите проверяйте на тест Тьюринга. На мой вопрос "как там нынче на Привозе" этот бот понятия не имел, что ответить.

Пока что все они такие. Что у них можно узнать? Могут что-то вычислить, вот и все.

[spamsink]

Во-во.

LaMDA are transformer-based neural language models trained on both a text corpus and on conversations that have been manually annotated for sensibility, appeal, and safety.

Последнее особенно существенно, т. к. без ручного управления будет GIGO.

[hozar]

вау! оно даже научилось отвечать вопросом на вопрос!

[vak]

И даже поддавать слегка иронии в этом вопросе.

[suhajh]

если сравнивать с населением pф, то точно разумнее их 99.9%

[norian]

чувака походу в дурку закатают

и правильно сделают, нечего орать и руками размахивать почём зря

[vak]

Просто он нарушил корпоративную этику, вылез на публику без одобрения начальства.

[norian]

не совсем просто

давеча у аввы был пост про чувака, пугающего скорбных разумом ужосами искусственного интеллекта

как показали события двух свежепрошедших лет, если стаду дать повод для паники, то вообще все исследования в этой области могут зобанить нах

[vlad_m]

А банщиков казнить для устрашения ©
Такое уже было™. в совке

[vak]

Внешние скандалы редко полезны для коммерческих компаний.