20.02.2024 17:38
Фалоцентризм у химерній стратифікованій GPT-J
Це дослідження занурює нас у захопливий світ внутрішнього розуміння GPT-J слів та концепцій. Створивши індивідуальне вбудовування і попросивши модель визначити його, ми вирушаємо в подорож по її «дереву визначень».
Спочатку дерево видало несподівані результати, наповнені розпливчастими узагальненнями, оскільки GPT-J намагався визначити «середню річ». Здавалось би, що він стратегічно уникає конкретики, віддаючи перевагу широким описам.
Однак глибший погляд виявляє деякі інтригуючі висновки. Якщо розширити список визначень і проаналізувати найбільш конкретні записи, то можна виявити повторювану тенденцію домінування тематики сексу і дітонародження. Серед десяти найбільш конкретних визначень виділяються посилання на анатомічні частини, сексуальний досвід і репродуктивні можливості.
Цікаво, що серед них відсутні знайомі предмети, професії чи повсякденні поняття. Цей «надзагальний» список пронизаний своєрідним фокусом на сексуальній та репродуктивній сфері.
Визначення «чоловічий пеніс» панує з точки зору кумулятивної ймовірності, за ним тісно слідують інші терміни, що мають сексуальне забарвлення. Це викликає переконливе запитання: чому GPT-J, здавалося б, надає пенісу такого першочергового значення у своїй внутрішній онтології?
Це несподіване відкриття наштовхує на різні інтерпретації. Можливо, воно відображає упередженість, притаманну навчальним даним, або глибші, підсвідомі аспекти самих мовних моделей. Фрейдистський аналіз міг би пролити світло на цей цікавий феномен.
Зрештою, цей експеримент пропонує унікальний погляд на те, як GPT-J сприймає і визначає світ. Хоча фокус на пенісі залишається непоясненим, він підкреслює потенціал дослідження онтологій мовних моделей за допомогою інноваційних методів, таких як «дерева визначень». Майбутні дослідження з використанням таких інструментів, як симулякри Фрейда у GPT-4, можуть відкрити нові можливості для розуміння цих складних репрезентацій світу.