Анализ данных (Data analysis)

@data_analysis_ml · ai · Russian · active

Subscribers 52K Subscribers, last 30 days: 52K → 52K +0 24h
Reach per post (ERR) 11.1%5.8K avg views
Posting 4.9/day last 2 hours ago
Reactions per 1K views 31.3 ❤ 👍 🔥

✔️ В GPT-6 Astra может использоваться recurrent depth 👀 Появились сообщения, что в GPT-6 Astra используется техника recurrent depth - одни и те же Transformer-блоки с общими весами прогоняются несколько раз подряд. Вместо того чтобы каждый раз добавлять новые слои и параметры, модель может повторно использовать уже существующие блоки и выполнять больше внутреннего вычисления над одним состоянием. По сути: hidden state → Transformer block → тот же block → тот же block → результат Такой подход близок к семейству Recurrent Reasoning Models (RRM), которое исследователи активно изучают как способ увеличить глубину рассуждения без пропорционального роста числа параметров. Интересно, что похожую идею разбирали ещё весной этого года в работе про recurrent reasoning models: https://arxiv.org/abs/2603.02193 PS: OpenAI публично архитектуру Astra пока не раскрывала, поэтому recurrent depth остаётся сообщаемой, но не подтверждённой компанией особенностью модели.

Views over time

02.5K5K7.5K4 Sep 15:1512 Nov 06:467.7K4 Sep 15:15: 0 views12 Nov 06:46: 7,670 views
Snapshots we took after posting.
WhenViews
4 Sep 2026, 15:150
12 Nov 2026, 06:467.7K

Who shared this post

Posts in other channels we index that link to this one. (Forwards with a hidden source can't be traced.)