- BrainTools - https://www.braintools.ru -

Ring-1T-FP8 стала одной из крупнейших открытых моделей на триллион параметров

Ring-1T-FP8 стала одной из крупнейших открытых моделей на триллион параметров - 1

Ring-1T-FP8 [1] стала одной из крупнейших открытых моделей, доступных исследователям и разработчикам. Эта модель построена на архитектуре Ling 2.0 и содержит один триллион параметров, из которых пятьдесят миллиардов активно участвуют в вычислениях. Ring-1T обучалась с применением техники RLVR, которая позволяет повысить точность рассуждений и обеспечивает самопроверку ответов. В процессе обучения [2] также использовались собственные методы ASystem и Icepop, которые уменьшают разрыв между обучением и инференсом.

Ring-1T-FP8 стала одной из крупнейших открытых моделей на триллион параметров - 2

Модель способна решать задачи уровня математических олимпиад и сохраняет контекст до 128 000 токенов, что вдвое превышает возможности предыдущих версий. Это открывает новые горизонты для сложных вычислительных задач и делает Ring-1T-FP8 мощным инструментом для исследователей и разработчиков, работающих с искусственным интеллектом [3].

Ring-1T-FP8 стала одной из крупнейших открытых моделей на триллион параметров - 3

Ring-1T-FP8 демонстрирует возможности огромных открытых моделей и показывает, что масштабные ИИ-системы становятся всё более доступными. Она позволяет глубже изучать поведение [4] больших нейросетей, экспериментировать с новыми методами обучения и тестировать алгоритмы, которые требуют высокого уровня вычислительной мощности и долгосрочного сохранения контекста.


Хотите быть в курсе важных новостей из мира ИИ? Подписывайтесь на наш Telegram‑канал BotHub AI News [5].

Автор: cognitronn

Источник [6]


Сайт-источник BrainTools: https://www.braintools.ru

Путь до страницы источника: https://www.braintools.ru/article/20679

URLs in this post:

[1] Ring-1T-FP8: https://huggingface.co/inclusionAI/Ring-1T-FP8

[2] обучения: http://www.braintools.ru/article/5125

[3] интеллектом: http://www.braintools.ru/article/7605

[4] поведение: http://www.braintools.ru/article/9372

[5] BotHub AI News: https://t.me/bothub

[6] Источник: https://habr.com/ru/companies/bothub/news/956406/?utm_source=habrahabr&utm_medium=rss&utm_campaign=956406

www.BrainTools.ru

Rambler's Top100