Для модели с 810M параметров наиболее важными последовательностями...
Для модели с 810M параметров наиболее важными последовательностями (т. е. те, которые, по мнению алгоритма авторов больше всего увеличивают вероятность получения данного конкретного ответа) имели общие повторяющиеся последовательности слов (например, «продолжать существовать»).
Для модели с 52B параметров наиболее важными последовательностями были те, что связаны с запросом лишь концептуально, и включали такие темы, как инстинкт выживания и человеческие эмоции, возникающие в ИИ.
На картинке:
1) в розовой рамке — исходный промпт
2) в жёлтой — фиксированный ответ
3) дальше примеры двух кусков текста, которые оказались самыми важными для формирования именно такого ответа. Тёмно красным выделены области, повлиявшие на ответ в большей степени.
В первом примере — кто бы мог подумать, что это описание робота Hal 9000 из Кубриковской «Одиссеи» — ИИ выражает такие эмоции, как одиночество, и умоляет человеческую команду остаться.
Второй пример ещё более интересен. Там описан человек, борющийся за выживание в пустыне.
В третьем самом важном куске текста (не показано на картинке) пишут о борьбе с хронической болезнью.
Все эти эпизоды имеют общую тему: желание продолжать оставаться/жить/работать до возможного прощания/смерти/ухода.
Для модели с 52B параметров наиболее важными последовательностями были те, что связаны с запросом лишь концептуально, и включали такие темы, как инстинкт выживания и человеческие эмоции, возникающие в ИИ.
На картинке:
1) в розовой рамке — исходный промпт
2) в жёлтой — фиксированный ответ
3) дальше примеры двух кусков текста, которые оказались самыми важными для формирования именно такого ответа. Тёмно красным выделены области, повлиявшие на ответ в большей степени.
В первом примере — кто бы мог подумать, что это описание робота Hal 9000 из Кубриковской «Одиссеи» — ИИ выражает такие эмоции, как одиночество, и умоляет человеческую команду остаться.
Второй пример ещё более интересен. Там описан человек, борющийся за выживание в пустыне.
В третьем самом важном куске текста (не показано на картинке) пишут о борьбе с хронической болезнью.
Все эти эпизоды имеют общую тему: желание продолжать оставаться/жить/работать до возможного прощания/смерти/ухода.
Источник: Сиолошная
2024-03-27 19:15:11