OpenAI уволила трёх исследователей, критиковавших loop-трансформер
The Information сообщила, что OpenAI уволила трёх исследователей, выступавших против перехода на loop-трансформер (recurrent depth), при котором вычисления идут в скрытых состояниях и не видны системам мониторинга chain-of-thought. GPT-6 Astra уже использует ограниченную версию архитектуры и показывает сниженную наблюдаемость рассуждений.
- Уволены три исследователя, включая Томека Корбака, 1 октября
- Loop-трансформер применяет один блок весов многократно, вычисления идут в скрытых состояниях
- GPT-6 Astra уже использует ограниченную версию архитектуры
- В system card Astra указана сниженная наблюдаемость chain-of-thought
Читать дальше
Компании