syntropic-clx/Clyx_0.2-115.67M-BASE - Каталог нейросетей
Генерация текста

syntropic-clx/Clyx_0.2-115.67M-BASE

Добавлено:
syntropic-clx/Clyx_0.2-115.67M-BASE

Causal language model trained from scratch on ~1.57B tokens. Custom Transformer with RoPE, RMSNorm, SwiGLU. No external pretrained weights. Data: Russian text, English text, Python and C/C++ code (~10 GB raw).

Модальности:
Генерация текста


Задача: Генерация текста
Автор: syntropic-clx
Теги: causal-lm, custom-transformer, pretrained, from-scratch, rope, rmsnorm, swiglu, en
Лайков: 3  |  Загрузок: 8

Открыть на HuggingFace →

Описание основано на материалах HuggingFace. Перевод выполнен автоматически.