Сиолошная

@seeallochnaya · ai · Russian · active

Subscribers 80.7K tracking since 23 Oct
Reach per post (ERR) 39.0%31.5K avg views
Posting 1.3/day last 1 day ago
Reactions per 1K views 9.8 👍 🔥 🤡

В карточке тоже есть интересные метрики, но хотел выделить вот это: «Мы оцениваем фактологическую точность на обезличенных диалогах из ChatGPT, которые пользователи наших предыдущих моделей отметили как содержащие фактические ошибки. Эти примеры специально отобраны для выявления случаев, наиболее подверженных галлюцинациям, поэтому ожидается, что их абсолютная частота ошибок будет намного выше реального уровня ошибок в продакшене. Эту метрику не следует интерпретировать как частоту галлюцинаций, наблюдаемую при реальной эксплуатации. Мы используем две метрики: (1) допускает ли модель вообще какую-либо ошибку (частота галлюцинаций на уровне ответа) и (2) воспроизводит ли модель ту самую конкретную ошибку, на которую указал пользователь. Мы обнаружили, что Astra допускает существенно меньше фактических ошибок, чем GPT-5.6 Sol, и с гораздо меньшей вероятностью воспроизводит галлюцинации, о которых сообщали пользователи. Эти улучшения особенно ярко выражены при очень низких настройках длины рассуждений»

Views over time

010K20K30K3 Sep 19:4423 Oct 03:2428.9K3 Sep 19:44: 0 views23 Oct 03:24: 28,900 views
Snapshots we took after posting.
WhenViews
3 Sep 2026, 19:440
23 Oct 2026, 03:2428.9K

Who shared this post

Posts in other channels we index that link to this one. (Forwards with a hidden source can't be traced.)

Nobody yet.