Компания «Норникель» представила MetalGPT-1, инновационную языковую модель, специально разработанную для решения задач в области металлургии и добычи полезных ископаемых. Эта уникальная модель с открытым исходным кодом обладает значительным потенциалом для повышения эффективности и оптимизации производственных процессов в данных отраслях.
В отличие от универсальных языковых моделей, обученных на разнородных данных из интернета, MetalGPT-1 с самого начала своего развития адаптирована к специфическому терминологическому аппарату, аббревиатурам и сложным техническим процессам, характерным для металлургической и горнодобывающей промышленности. Модель, включающая в себя 32 миллиарда параметров, была обучена на специализированной текстовой базе объемом 10 гигабайт, охватывающей широкий спектр вопросов, связанных с металлургией и горнодобычей.
Одной из ключевых особенностей MetalGPT-1 является использование информации, которая не доступна в открытых источниках. Более одного миллиона технологических протоколов, внутренних регламентов, патентов, отчетов по научно-исследовательским и опытно-конструкторским разработкам (НИОКР), а также научно-технической литературы были анонимизированы и обработаны для исключения конфиденциальных данных. Это позволило интегрировать специализированные знания в модель без риска утечки коммерческой информации.
Дополнительно была сформирована база из приблизительно 500 тысяч пар вопросов и ответов, а также инструкций, предназначенных для решения практических задач. Разработка данной модели заняла около года и включала в себя этапы сбора и предварительной обработки данных, а также их тонкой настройки с использованием современных методов машинного обучения.
MetalGPT-1 представляет собой интеграционный инструмент, объединяющий различные инженерные, технологические, производственные и корпоративные задачи в единый унифицированный языковой интерфейс. Благодаря тщательно разработанной архитектуре и комплексному обучению, модель демонстрирует высокую точность и надежность при генерации рекомендаций, что существенно снижает вероятность ошибок и повышает качество принимаемых решений на основе искусственного интеллекта.
Как отмечает Данил Ивашечкин, руководитель направления по развитию ИИ компании «Норникель», металлургия является одной из наиболее сложных и специализированных отраслевых областей, требующей глубокого понимания уникального языка процессов, терминологии и аббревиатур. Универсальные модели, не обладающие специфической подготовкой, теряют точность при работе с таким узкоспециализированным контентом, в то время как крупные модели требуют значительных вычислительных ресурсов. MetalGPT-1 представляет собой революционное достижение в данной области, являясь первой доменной моделью с 32 миллиардами параметров, специально оптимизированной для металлургической отрасли.
Модель и соответствующие промышленные бенчмарки доступны на платформе Hugging Face, что открывает широкие возможности для всех участников отрасли по использованию данного инновационного инструмента.