- BrainTools - https://www.braintools.ru -

ИИ-система Locus превзошла экспертов в научных исследованиях

Intology анонсировала Locus, систему «искусственного учёного», которая по предварительным результатам обходит человеческих исследователей, и это не просто хайп. На бенчмарке RE‑Bench, под равными временными и вычислительными ресурсами, Locus показывает результаты выше, чем лучшие специалисты в области ИИ из ведущих лабораторий. 

ИИ-система Locus превзошла экспертов в научных исследованиях - 1

Locus также устанавливает SOTA‑результаты на KernelBench и MLE‑Bench Lite, что говорит о её универсальности и способности решать сложные научные задачи. Инновация заключается именно в длительном горизонте работы. В отличие от других систем, Locus может постоянно улучшаться на протяжении нескольких дней, одновременно запускает тысячи экспериментов и проводит структурированный научный [1] поиск. 

ИИ-система Locus превзошла экспертов в научных исследованиях - 2

RE‑Bench – это набор задач, имитирующих передовую исследовательскую работу в ИИ, например, восстановление испорченных моделей, предсказание оптимальных конфигураций или проектирование архитектур с необычными ограничениями. За непрерывный 64‑часовой запуск Locus набрал 1.30 балла, тогда как человеческие эксперты показали 1.27, что подчёркивает конкурентоспособность ИИ в исследовательской деятельности. 

ИИ-система Locus превзошла экспертов в научных исследованиях - 3

Кроме этого, Locus продемонстрировал впечатляющие результаты в оптимизации ядер. На KernelBench система ускорила вычисления до 100× в некоторых сценариях, например, при работе с LayerNorm. В ходе этих экспериментов Locus использовал продвинутые оптимизации – асинхронные копии, группирование потоков и векторизацию, чтобы максимально эффективно работать на GPU типа NVIDIA H100. 

ИИ-система Locus превзошла экспертов в научных исследованиях - 4

На MLE‑Bench Lite Locus также впечатлил: решая задачи машинного обучения [2] (обработка данных, выбор признаков, обучение моделей), модель заработала медали в 77% соревнований Kaggle, превзойдя предыдущий рекорд, установленный Microsoft. 

Ещё одна важная особенность Locus – предсказуемое масштабирование. Интенсивность вычислений и производительность растут почти линейно: чем больше ресурсов вкладываешь, тем лучше результат, без явных признаков насыщения.  Это даёт организациям уверенность в прогнозировании затрат и выгод от дальнейшего использования системы.

ИИ-система Locus превзошла экспертов в научных исследованиях - 5

Но у Locus есть и ограничения. Сейчас она работает в рамках классических парадигм машинного обучения. Она она не перепридумывает проблему, а исследует уже заданное пространство решений. Бенчмарки, на которых тестируют Locus (RE‑Bench, KernelBench и MLE‑Bench) всё ещё упрощены по сравнению с реальными научными исследованиями, где нужно задавать метрики, координировать распределённые эксперименты и справляться с неопределённостью. 

Intology планирует развернуть Locus для длительных запусков (недели и даже месяцы), чтобы он мог работать над настоящими научными проблемами. Сейчас система используется внутри лаборатории для исследовательских задач, и уже сделаны первые открытия. В ближайшие месяцы Intology обещает поделиться новыми научными результатами. Будем ждать!


Делегируйте часть рутинных задач вместе с BotHub! [3] Для доступа к сервису не требуется VPN и можно использовать российскую карту. По ссылке [4] вы можете получить 100 000 бесплатных токенов для первых задач и приступить к работе с нейросетями прямо сейчас!

Подробнее [5]

Автор: cognitronn

Источник [6]


Сайт-источник BrainTools: https://www.braintools.ru

Путь до страницы источника: https://www.braintools.ru/article/22261

URLs in this post:

[1] научный: http://www.braintools.ru/article/7634

[2] обучения: http://www.braintools.ru/article/5125

[3] BotHub!: https://bothub.chat/?utm%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C_source=contentmarketing&utm%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C_medium=habr&utm%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C_campaign=news&utm%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C%5C_content=NANO%20BANANA%20PRO%20ADDED%20TO%20LMARENA,%20NOW%20AVAILABLE%20FOR%20FREE%20TESTING

[4] По ссылке: https://bothub.chat/?invitedBy=m_aGCkuyTgqllHCK0dUc7

[5] Подробнее: https://www.intology.ai/blog/previewing-locus

[6] Источник: https://habr.com/ru/companies/bothub/news/969182/?utm_source=habrahabr&utm_medium=rss&utm_campaign=969182

www.BrainTools.ru

Rambler's Top100