Supra-50M — это компактная причинно-следственная языковая модель BASE с 50 млн параметров, созданная SupraLabs и обученная с нуля с использованием архитектуры в стиле Llama на 20 миллиардах токенов высококачественного образовательного веб-текста. Несмотря на то, что он значительно меньше сопоставимых открытых моделей, он обеспечивает конкурентоспособные или превосходящие результаты по нескольким ключевым критериям. Это наша первая модель плана масштабирования SupraLabs. Подсказка: «Основная концепция физики» > Основная концепция физики сомнительна, и идея о том, что мы можем заставить вещи вести себя определенным образом. Самая важная часть физики называется квантовой механикой, которая утверждает, что все частицы состоят из энергии (энергии) и материи (материи). В физике существует два типа частиц: элементарные частицы и экзотические. Эти частицы обладают такими свойствами, как масса, скорость или импульс, но они не взаимодействуют друг с другом, образуя новые объекты. Это потому, что эти частицы не существуют независимо друг от друга. В этом случае экзотическая частица может быть создана путем добавления в ее структуру большего количества энергии, чем потребовалось бы для нормальной частицы. Однако если добавить к экзотической частице дополнительную энергию, новый объект будет становиться все меньше и больше…
Модальности:
Генерация текста
Задача: Генерация текста
Автор: SupraLabs
Теги: llama, supra, chimera, 50m, small, open, open-source, cpu
Лайков: 11 | Загрузок: 397
Описание основано на материалах HuggingFace. Перевод выполнен автоматически.