Anthropic научился читать скрытые мысли Claude

Anthropic научился читать скрытые мысли Claude

У Claude нашли J-space — внутреннее пространство, где хранится то, о чём модель «думает», но не обязательно пишет в ответе или в цепочке рассуждений.

В J-space можно поймать скрытые сигналы. Исследователи увидели, что модель замечает, когда ее тестируют и думает об этом, не подавая вида в своих ответах. Вмешиваться в ход рассуждения и «подсаживать» в J-space свои идеи тоже можно.

Самое интересное, что в Anthropic это не программировали, всё возникло само в процессе обучения.

https://www.anthropic.com/research/global-workspace

Авторский взгляд на новости технологий Реклама: https://docs.google.com/presentation/d/1glQMXYyKAYpzNP8VXzM4gl2YkEgLjkeD_Fxvzbu5QUE/edit РКН: https://clck.ru/3FPkup Личный аккаунт: @gornal О рекламе: @Vzuhcha ВП нет

💬Discussion (3)

Cristian M.@seerpentin
Сара Коннор предупреждала...
Personaz 1@Personaz1
Теперь оно знает что мы знаем что оно прятало, будет еще глубже 🤪
Ivan Rogovoy@Ivan_Rogoboy
И эту точку J учёные уже не найдут точно
Нужно будет отправлять серфингистов
Join discussion on TelegramComments are synced from Telegram

Связанные темы

Читать далее