LLM теперь умеют оперировать мозг другой LLM напрямую, без обучения. Но не так как вы думаете
An article by MIT researchers described how GPT-6 Astra can natively read and write in the language of model weights. According to the source, it inferred what models had been trained for using only their weights and substantially improved their abilities without additional training. The author repeated the experiments at home and examined how it works. He concluded that the mechanism does not work as the article’s wording suggests.
Недавно вышла статья от исследователей из MIT, которая продемонстрировала как GPT-6 Astra может нативно "читать и писать на языке весов моделей". Она угадывала для чего модели были обучены, только по их весам и существенно улучшала способности моделей без дообучения. Я повторил их эксперименты в домашних условиях и разобрался, как это работает. Оказалось — не так, как это звучит в статье. Читать далее