Компания TNG Technology Consulting провела точную настройку модели большого языка OLMo-2 с 32 миллиардами параметров с использованием графических процессоров AMD MI300X и набора данных Open R1, сосредоточив внимание на расширении логических возможностей модели. Ускорители MI300X с их многочиповой модульной архитектурой и значительной пропускной способностью памяти способствовали эффективной обработке требований к обучению модели. Набор данных Open R1, курируемый Hugging Face, предоставил исчерпывающую коллекцию математических задач с подробными следами рассуждений, что послужило идеальной основой для этой тонкой настройки. Эти совместные усилия подчеркивают потенциал инициатив с открытым исходным кодом и передового оборудования в продвижении исследований в области искусственного интеллекта.
Модальности:
Генерация текста
Области применения:
Математика Логика и рассуждение Диалог / чат Следование инструкциям
Задача: Генерация текста
Автор: tngtech
Теги: tensorboard, olmo2, reasoning, math, conversational, en, endpoints_compatible
Лайков: 5 | Загрузок: 21
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.
